Senior Data Engineer

Dla naszego klienta z branży turystycznej i rejsowej poszukujemy doświadczonej osoby na stanowisko Senior Data Engineer. Projekt jest długoterminowy i dotyczy rozwoju globalnej platformy danych opartej na ekosystemie Azure.

• Znajomość Apache Spark
• Biegłość w Python
• Znajomość SQL
• Doświadczenie z ekosystemem Azure Cloud: Azure Databricks, Azure Data Factory, Azure Data Lake, Azure Synapse Analytics, Azure Data Explorer
• Doświadczenie z Databricks
• Znajomość CI/CD oraz Azure DevOps
• Doświadczenie z Power BI
• Doświadczenie w budowie i utrzymaniu procesów ETL/ELT
• Doświadczenie z Delta Live Tables (DLT)
• Doświadczenie z Unity Catalog
• Zrozumienie architektury Lakehouse
• Doświadczenie w automatyzacji infrastruktury, monitoringu i logowaniu
• Silne umiejętności analityczne i rozwiązywania problemów
• Samodzielność oraz wysoki poziom ownership i odpowiedzialności
• Proaktywne podejście do identyfikowania ryzyk, blokerów i możliwości usprawnień
• Bardzo dobra komunikacja i umiejętność pracy z interesariuszami technicznymi i biznesowymi
• Doświadczenie w pracy w dynamicznym środowisku ze zmieniającymi się priorytetami
• Umiejętność podejmowania pragmatycznych decyzji i dowożenia rezultatów przy niepełnych wymaganiach
• Doświadczenie w zespołach cross-funkcyjnych
• Znajomość zasad data governance, bezpieczeństwa i compliance
• Komfort pracy w środowisku o relatywnie niskim poziomie formalnych procesów
• Elastyczność, odporność i dobra organizacja pracy
• Umiejętność samodzielnego prowadzenia inicjatyw i proponowania praktycznych rozwiązań

• Projektowanie, rozwój i utrzymanie skalowalnych rozwiązań danych w ekosystemie Azure Data Platform (Azure Synapse, Databricks, Data Lakehouse)
• Wdrażanie i optymalizacja procesów ETL/ELT: pobieranie, transformacja i udostępnianie danych z wielu domen biznesowych
• Tworzenie rozwiązań do przetwarzania danych w Pythonie, SQL i Apache Spark
• Wsparcie migracji i modernizacji platformy, w tym wdrożenia Unity Catalog oraz aktualizacji platformy
• Budowa i utrzymanie workflowów Databricks, Delta Live Tables (DLT), frameworków metadata-driven i procesów orkiestracji
• Współpraca z architektami, analitykami i interesariuszami biznesowymi przy przekładaniu wymagań na rozwiązania techniczne
• Dbanie o jakość, niezawodność, wydajność i bezpieczeństwo danych
• Analiza incydentów produkcyjnych, wyszukiwanie przyczyn źródłowych i wdrażanie działań naprawczych
• Udział we wdrażaniu CI/CD, automatyzacji infrastruktury, monitoringu i dobrych praktyk operacyjnych
• Optymalizacja pipeline’ów, struktur przechowywania danych i obciążeń przetwarzania pod kątem wydajności i kosztów
• Udział w przeglądach rozwiązań i architektury oraz promowanie standardów inżynierskich i zasad governance
• Dzielenie się wiedzą, mentoring i wspieranie rozwoju technicznego zespołu
• Ścisła współpraca z Data Architektami i zespołami platformowymi, aby zapewnić zgodność z architekturą korporacyjną i zasadami Lakehouse
• Dostarczanie niezawodnych, skalowalnych fundamentów danych dla raportowania, analityki i inicjatyw AI/ML

Administratorem Twoich danych jest JellyLabs, Kraków (dalej: „Administrator”). Dane przetwarzamy w celu rekrutacji na stanowisko z ogłoszenia — na podstawie Kodeksu pracy (art. 6 ust. 1 lit. c RODO) w zakresie danych obowiązkowych, Twojej zgody (art. 6 ust. 1 lit. a RODO) w zakresie danych dodatkowych oraz naszego prawnie uzasadnionego interesu (art. 6 ust. 1 lit. f RODO) w zakresie obrony przed roszczeniami. Podanie danych wymaganych Kodeksem pracy jest obowiązkowe, pozostałych — dobrowolne. Dane przechowujemy do zakończenia rekrutacji i przez okres przedawnienia roszczeń, a przy zgodzie na przyszłe rekrutacje — do jej wycofania, nie dłużej niż 24 miesiące. Odbiorcami mogą być nasi dostawcy usług rekrutacyjnych, w tym JUST JOIN IT Sp. z o.o., operator serwisów rocketjobs.pl, justjoin.it, rocketjobs.com. Masz prawo dostępu do danych, ich sprostowania, usunięcia, ograniczenia i przenoszenia, wniesienia sprzeciwu oraz skargi do Prezesa UODO. Zgodę możesz wycofać w każdej chwili — bez wpływu na przetwarzanie sprzed wycofania. Dane nie podlegają profilowaniu.