Data Engineer

Współpraca z międzynarodową organizacją z branży ubezpieczeniowej nad strategicznymi inicjatywami transformacji danych. Projekt obejmuje rozwój i utrzymanie centralnej platformy integracji danych działającej w chmurze publicznej.

• Minimum 4 lata doświadczenia w realizacji projektów jako Data Engineer.
• Komunikatywna znajomość języka angielskiego umożliwiająca współpracę w środowisku międzynarodowym.
• Znajomość usług Microsoft Azure, w szczególności Azure Databricks oraz Azure Data Factory.
• Znajomość Argo Workflows, REST API, Kubernetes oraz Kafka.
• Doświadczenie w pracy z SQL oraz CI/CD.

• Doradztwo dla biznesu w zakresie wzorców integracji, projektowania potoków danych, orkiestracji procesów oraz opcji architektonicznych.
• Budowa i rozwój potoków danych: pozyskiwanie, transformacja, wzbogacanie oraz dostarczanie danych do platform analitycznych i integracyjnych.
• Projektowanie i utrzymanie integracji sterowanych przepływami pracy (workflow) zapewniających skalowalność, obserwowalność i niezawodność przepływów danych.
• Przekładanie potrzeb integracyjnych na skalowalne rozwiązania techniczne we współpracy z interesariuszami.
• Projektowanie, budowa i utrzymanie rozwiązań integrujących aplikacje, usługi oraz strumienie danych.
• Tworzenie efektywnych zapytań i logiki ekstrakcji, walidacji oraz transformacji danych w systemach bazodanowych.