Lead Data Engineer

150 - 190 PLN/ godz./ godz.B2BB2B (netto)

C-Level / ManagerZdalnie·WarszawaInne·B2B

#473468·Dodano wczoraj·2

Źródło: justjoin.it

Aplikuj teraz

Tech Stack / Keywords

Databricks PythonSpark / Apache SparkSQLData Lakehouse

Podsumowanie oferty

Rola obejmuje projektowanie i dostarczanie nowoczesnych platform danych opartych na chmurze. Osoba na tym stanowisku będzie prowadzić obszar inżynierii danych, ze szczególnym uwzględnieniem Databricks, data governance, orkiestracji i wirtualizacji danych.

Wymagania

Ekspercka wiedza i praktyczne doświadczenie w pracy z platformą Databricks.
Głębokie zrozumienie i doświadczenie we wdrażaniu architektury Data Lakehouse.
Znajomość procesów, frameworków i narzędzi z obszaru data governance oraz compliance.
Praktyczne doświadczenie z narzędziami do orkiestracji (workflow orchestration) oraz udział w projektach migracyjnych.
Biegła znajomość SQL, Python, Spark oraz chmurowych usług danych (cloud-native data services).
Udokumentowane doświadczenie w dostarczaniu platform danych na poziomie enterprise.
Praktyczna znajomość języka angielskiego na poziomie min. B2/C1 umożliwiająca swobodną komunikację pisemną i ustną (codzienna współpraca z klientami i współpracownikami anglojęzycznymi).

Obowiązki

Prowadzenie obszaru inżynierii danych oraz nadzór nad wdrażaniem rozwiązań technicznych.
Projektowanie i implementacja skalowalnych potoków danych (data pipelines) oraz frameworków przetwarzania.
Prowadzenie migracji z dotychczasowych platform orkiestracji do nowoczesnych rozwiązań cloud-native.
Definiowanie standardów zarządzania danymi (data governance), mapowania pochodzenia danych (data lineage), zarządzania metadanymi oraz kontroli bezpieczeństwa.
Wdrażanie wzorców wirtualizacji danych i integracja rozwiązań z wieloma źródłami danych.
Optymalizacja wydajności, dbanie o niezawodność oraz doskonałość operacyjną infrastruktury danych.

Benefity

Zasadniczy wpływ na kształt i architekturę nowoczesnej platformy danych.
Współpraca z doświadczonym zespołem inżynierskim.

in4ge sp. z o.o.

393 aktywne oferty

Zobacz wszystkie oferty

Aplikuj teraz