Inżynier / Inżynierka Danych (Azure / Microsoft Fabric)

Dla naszego klienta, lidera branży FMCG.

• Kilkuletnie doświadczenie w inżynierii danych
• Wykształcenie wyższe kierunkowe
• Doświadczenie w pracy na podobnym stanowisku
• Bardzo dobra znajomość Azure (Storage, Key Vault, Networking, IAM)
• Bardzo dobra znajomość Microsoft Fabric / Synapse / Databricks
• Bardzo dobra znajomość Spark (PySpark, Spark SQL) oraz Python
• SQL na poziomie średnio-zaawansowanym
• Doświadczenie z Git/GitHub oraz CI/CD
• Znajomość narzędzi i podejść Data Quality
• Umiejętność optymalizacji pipeline’ów oraz pracy w środowisku greenfield
• Samodzielność, odpowiedzialność, proaktywność oraz nastawienie na rozwój

• Projektowanie, budowa i utrzymanie pipeline’ów danych z systemów (SAP, MES, systemy zewnętrzne) do warstwy analitycznej
• Implementacja procesów ingestion oraz transformacji danych (bronze/silver) z wykorzystaniem PySpark, Spark SQL i Python
• Administracja i rozwój środowiska Microsoft Fabric / Azure (workspace’y, zasoby, bezpieczeństwo, monitoring kosztów)
• Monitoring pipeline’ów, obsługa alertów i reagowanie na incydenty
• Współpraca z analitykami przy budowie modeli danych (warstwa gold)
• Zapewnienie jakości danych oraz optymalizacja wydajności procesów przetwarzania