Mid Databricks Data Engineer
140 - 170 PLN/ godz.B2B
MidFull-time·B2B
#442064·Dodano 3 dni temu·2
Źródło: justjoin.itTech Stack / Keywords
DatabricksPythonSQLETL/ELTCloudAzure DatabricksDelta LakeCI/CDGit
Firma i stanowisko
ITELENCE to szybko rozwijająca się firma wspierająca swoich międzynarodowych klientów w ich biznesowej i cyfrowej transformacji.
Wymagania
- Doświadczenie na stanowisku Data Engineer lub w podobnej roli.
- Praktyczna znajomość Databricks.
- Dobra znajomość Python i/lub SQL.
- Doświadczenie w budowaniu procesów ETL/ELT i pipeline'ów danych.
- Doświadczenie w pracy z dużymi zbiorami danych.
- Znajomość podstawowych koncepcji związanych z Data Lake / Lakehouse.
- Doświadczenie w pracy z chmurą — Azure, AWS lub GCP.
- Umiejętność analizy i optymalizacji procesów przetwarzania danych.
- Dobra znajomość języka angielskiego.
- Samodzielność i umiejętność pracy w środowisku projektowym.
Mile widziane:
- Doświadczenie z Apache Spark / PySpark.
- Znajomość Azure Databricks.
- Doświadczenie z Delta Lake.
- Znajomość narzędzi CI/CD oraz Git.
- Doświadczenie z rozwiązaniami chmurowymi i architekturą danych.
Obowiązki
- Projektowanie, budowanie i rozwój rozwiązań data engineeringowych w środowisku Databricks.
- Tworzenie i rozwój procesów ETL/ELT oraz pipeline'ów danych.
- Praca z dużymi zbiorami danych oraz ich transformacja i przygotowanie do dalszej analizy.
- Rozwijanie i optymalizacja procesów przetwarzania danych.
- Praca z notebookami, jobami oraz workflowami w Databricks.
- Integracja danych z różnych źródeł i dbanie o ich jakość oraz spójność.
- Współpraca z Data Engineers, Data Scientists oraz innymi zespołami technicznymi.
- Monitorowanie i optymalizacja wydajności procesów danych.
- Dokumentowanie tworzonych rozwiązań i procesów.
Benefity
- Praca z technologią Databricks i nowoczesnymi rozwiązaniami z obszaru danych.
- Możliwość współpracy przy realnych rozwiązaniach wykorzystywanych biznesowo.
- Praca zdalna.
- Możliwość rozwoju w obszarze Data Engineering i technologii cloud.
- Multisport PLUS.
- Prywatna opieka medyczna.
Karta sportowa
Opieka zdrowotna
Inne informacje
Informujemy, że administratorem danych jest Itelence sp. zo.o. z siedzibą w Warszawie. Masz prawo do żądania dostępu do swoich danych osobowych i innych praw związanych z przetwarzaniem danych osobowych w procesie rekrutacji.
ITELENCE
81 aktywnych ofert