Data Engineer with Microsoft Azure (f/m/x)

Brak informacji o wynagrodzeniu

MidZdalnie·WarszawaFull-time

#470194·Dodano 5 dni temu·0

Źródło: nofluffjobs.com

Aplikuj teraz

Tech Stack / Keywords

Azure Python SQLETL/ELTApache Spark/PySparkMicrosoft Azure Databricks Snowflake Apache Kafka Apache Airflow

Podsumowanie oferty

W Centrum Kompetencyjnym Data & Analytics będziesz projektować i rozwijać platformy przetwarzania danych oraz pipeline’y ETL/ELT. Praca obejmuje projekty oparte na Microsoft Azure, w tym Azure Databricks, Data Factory, Synapse i Fabric.

Wymagania

Minimum 4 lata doświadczenia w projektach związanych z przetwarzaniem i integracją dużych wolumenów danych.
Bardzo dobra znajomość SQL oraz Python.
Doświadczenie w pracy z frameworkami do przetwarzania danych, takimi jak Apache Spark / PySpark.
Praktyczne doświadczenie w projektowaniu i budowie rozwiązań Data Lake oraz Data Warehouse.
Umiejętność budowania i utrzymywania pipeline’ów ETL/ELT oraz pracy z narzędziami do orkiestracji i integracji danych.
Komercyjne doświadczenie w projektach przetwarzania danych opartych na rozwiązaniach chmurowych Microsoft Azure, np. Databricks, Azure Data Factory, Synapse lub Fabric.
Znajomość koncepcji przetwarzania danych w środowisku rozproszonym oraz optymalizacji pipeline’ów danych.
Umiejętność swobodnej komunikacji w języku angielskim.
Płynna znajomość języka polskiego.

Mile widziane:

Doświadczenie w projektach migracji danych z on-premise do chmury, obejmujących bazy danych Oracle, PostgreSQL lub MS SQL.

Obowiązki

Projektowanie, budowanie i rozwijanie skalowalnych oraz wysokowydajnych platform przetwarzania danych w architekturze Data Lake / Data Platform.
Tworzenie i utrzymywanie pipeline’ów ETL/ELT do integracji danych z różnych źródeł oraz ich przetwarzania w środowisku Azure Databricks.
Modelowanie danych i przygotowywanie struktur danych dostosowanych do potrzeb analitycznych i biznesowych.
Implementowanie rozwiązań do przetwarzania danych w trybie batch i/lub near real-time.
Monitorowanie, optymalizowanie i rozwijanie istniejących pipeline’ów oraz procesów przetwarzania danych.
Współpraca z analitykami danych, zespołami BI oraz Data Science w zakresie przygotowania i udostępniania danych.
Zbieranie wymagań biznesowych i proponowanie optymalnych rozwiązań technologicznych.
Tworzenie i utrzymywanie dokumentacji technicznej rozwijanych rozwiązań.
Wsparcie i mentoring mniej doświadczonych członków zespołu oraz dzielenie się wiedzą i najlepszymi praktykami.

Benefity

Medical care.
Insurance.
Sport cards.
Language courses.
Referral programs.
Welcome packs and other occasional gifts.
Passion Sponsorship program.
Regular integration events and trips.
Internal training center.
Mentoring program.
Buddy Program & efficient onboarding process.
Technology communities.
Jubilee rewards.
Profit sharing.
Sport & hobby communities.
Breakfast, drinks and fresh fruits in the office.
Comfortable and well-equipped offices.
MySii app.

Opieka zdrowotna

Ubezpieczenie

Karta sportowa

Kursy językowe

Spotkania integracyjne

Szkolenia wewnętrzne

Udział w zyskach

Napoje w biurze

Darmowe przekąski

Inne informacje

Wymagane przebywanie na terenie Polski.

Sii

393 aktywne oferty

Zobacz wszystkie oferty

Aplikuj teraz