Data Engineer (Snowflake+dbt)

Firma ITFS poszukuje Data Engineera do pracy związaną z rozwojem warstwy analitycznej w środowisku Snowflake na potrzeby projektu z branży farmaceutycznej.

• Min. 3 lata doświadczenia jako konsultant IT lub inżynier danych w obszarze analityki
• Praktyczna znajomość Snowflake (magazyny danych, role, tasks/streams, zaawansowane modelowanie SQL i optymalizacja wydajności)
• Doświadczenie w produkcyjnym wykorzystaniu DBT (tworzenie modeli, makr, testów i dokumentacji)
• Znajomość GitLab lub analogicznych narzędzi kontroli wersji oraz wdrażania modeli danych wspieranego przez CI
• Doświadczenie w refaktoryzacji i rozwoju istniejących potoków danych na podstawie wymagań pisemnych i makiet
• Bardzo dobra znajomość języka angielskiego na poziomie min. B2/C1
• Znajomość języka polskiego na poziomie ojczystym

Nice to have:

• Znajomość domeny produkcji oraz analizy wydajności procesów produkcyjnych
• Doświadczenie w branży farmaceutycznej
• Znajomość R/Shiny lub Streamlit do tworzenia prototypów analitycznych
• Doświadczenie w modelowaniu źródeł danych w Tableau (ekstrakty, publikowane źródła danych, bezpieczeństwo na poziomie wiersza)
• Doświadczenie z ekstrakcją danych z systemów SAP
• Znajomość rozwiązań takich jak Monte Carlo, Collibra, Immuta, Talend lub narzędzi do orkiestracji typu Airflow
• Znajomość języka niemieckiego

• Rozwój i udoskonalanie warstwy analitycznej w środowisku Snowflake dla istniejących potoków danych, w tym produktów danych źródłowych i zagregowanych
• Wdrażanie zmian w wymaganiach biznesowych, takich jak nowe atrybuty, modyfikacja logiki agregacji, poziomy szczegółowości oraz historyzacja cykli planowania
• Budowanie i utrzymanie modeli, testów oraz dokumentacji w DBT przy użyciu GitLab zgodnie ze standardami CI/CD i code review
• Projektowanie i implementacja logiki transformacji oraz analityki danych, w tym kontroli jakości procesów
• Zapewnienie zgodności ze standardami nazewnictwa, warstwowania danych, pochodzenia danych (data lineage) oraz dokumentacji
• Przeprowadzanie walidacji oraz rekonsyliacji danych z systemami źródłowymi i wsparcie monitorowania jakości danych
• Udział w ceremoniach Agile (sprint planning, estymacje, demo), poprawa błędów zgłoszonych podczas testów UAT oraz aktualizacja logiki biznesowej
• Tworzenie dokumentacji technicznej i przekazywanie wiedzy do zespołu wsparcia