Azure Data Engineer

130 - 140 PLN/ godz./ godz.B2BB2B (netto)

MidZdalnie·WarszawaFull-time·B2B

#464620·Dodano 4 dni temu·4

Źródło: justjoin.it

Aplikuj teraz

Tech Stack / Keywords

Azure SQL PySpark Python ETL Databricks Git AWS GCPPower BI

Podsumowanie oferty

Projektowanie, rozwój i utrzymanie rozwiązań do przetwarzania danych w środowisku Azure. Praca obejmuje budowę i integrację pipeline’ów danych oraz procesów ETL/ELT z użyciem Azure Data Factory i Databricks, we współpracy z inżynierami danych, specjalistami Data Science i architektami chmurowymi.

Wymagania

Praktyczne doświadczenie w rozwiązaniach opartych na architekturze Data Lake.
Doświadczenie w przetwarzaniu i przepływie danych z wykorzystaniem Databricks oraz Azure Data Factory.
Doświadczenie w projektowaniu i wdrażaniu rozwiązań w chmurze Azure.
Biegła znajomość SQL i PySpark.
Umiejętność modelowania danych oraz projektowania procesów ETL/ELT.
Doświadczenie w programowaniu w Pythonie lub podobnym języku skryptowym wykorzystywanym do transformacji danych, orkiestracji i automatyzacji.
Praktyczna wiedza z zakresu zaawansowanych funkcjonalności Databricks, w tym Unity Catalog, MLflow, Jobs i Pipelines.
Rozumienie architektury danych w chmurze, w szczególności Data Lakehouse, Medallion Architecture, integracji API i architektury event-driven.
Doświadczenie w stosowaniu CI/CD i DevOps, w tym Git oraz Azure DevOps.
Umiejętność współpracy w zespołach interdyscyplinarnych.
Język angielski na poziomie minimum B2.

Mile widziane:

Doświadczenie w pracy z chmurami AWS lub GCP.
Praktyka w integracji platform danych z narzędziami analitycznymi, np. Power BI.

Obowiązki

Projektowanie i wdrażanie skalowalnych rozwiązań do przetwarzania, transformacji i oczyszczania danych ustrukturyzowanych oraz nieustrukturyzowanych.
Tworzenie i utrzymywanie pipeline’ów danych integrujących informacje z baz danych, API oraz platform przetwarzania strumieniowego.
Rozwój procesów ETL/ELT z wykorzystaniem Azure Data Factory i Databricks.
Współpraca z inżynierami danych, specjalistami Data Science oraz architektami chmurowymi.
Współpraca z analitykami biznesowymi, ekspertami systemów źródłowych, architektami danych, inżynierami i Product Ownerami na kluczowych etapach projektu.
Wdrażanie dobrych praktyk CI/CD i DevOps w procesach przetwarzania danych.
Integracja platformy danych z narzędziami analitycznymi, takimi jak Power BI.

Benefity

Dostęp do lokalnych i międzynarodowych projektów dla klientów z Francji, Niemiec, Portugalii, Wielkiej Brytanii i krajów Beneluksu.
Dofinansowanie do 2 000 zł na szkolenia, certyfikaty techniczne, udział w konferencjach, lektoraty języków obcych i szkolenia miękkie.
Premia za polecanie kandydatów do 6 000 zł.
W pełni opłacona karta Medicover.
Karta Multisport.
Regularne imprezy integracyjne i upominki.
Program Mobilny.
Długoterminowa współpraca.

Dofinansowanie szkoleń

Budżet konferencyjny

Kursy językowe

Karta sportowa

Opieka zdrowotna

Spotkania integracyjne

Premie

act digital

150 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz