Data Engineer

do 200 PLN/ mies.B2B
SeniorFull-time·B2B
#436597·Dodano 10 dni temu·1
Źródło: Scalo
Aplikuj teraz

Tech Stack / Keywords

PythonJavaGoogle Cloud PlatformGCPClouderaHadoopDataprocDataflowBigQueryAirflow

Firma i stanowisko

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych. Obszary naszej działalności obejmują m.in.: • doradztwo technologiczne, • tworzenie oprogramowania, • systemy wbudowane, • rozwiązania chmurowe, • zarządzanie danymi, • dedykowane zespoły projektowe.

Wymagania

  • doświadczenie w realizacji projektów migracyjnych z on-premise do środowisk chmurowych, mile widziane doświadczenie z platformą Cloudera lub innymi rozwiązaniami opartymi na Hadoop
  • bardzo dobra znajomość języka Python, w szczególności w obszarze ETL, budowy pipeline’ów danych oraz automatyzacji
  • bardzo dobra znajomość języka Java
  • umiejętność projektowania i architektowania rozwiązań danych w GCP z uwzględnieniem skalowalności, bezpieczeństwa oraz optymalizacji kosztów
  • praktyczna znajomość narzędzi do orkiestracji, CI/CD oraz automatyzacji, takich jak Airflow, Git, Terraform lub rozwiązania równoważne
  • bardzo dobra znajomość języka angielskiego na poziomie C1, umożliwiająca codzienną komunikację, prowadzenie warsztatów technicznych oraz przygotowywanie dokumentacji projektowej
  • doświadczenie w analizie istniejących rozwiązań legacy oraz rekomendowaniu docelowych architektur w środowiskach chmurowych
  • znajomość zagadnień związanych z data governance, bezpieczeństwem danych oraz kontrolą dostępu w środowiskach chmurowych

Obowiązki

  • migrację platformy danych z Cloudera (on-premise) do architektury opartej na Google Cloud Platform (GCP) oraz wdrożenie nowych rozwiązań Data/AI w chmurze
  • opracowanie strategii i ścieżki migracji, w tym podejścia oraz rekomendacji technicznych
  • przeniesienie i modernizację istniejących procesów z wykorzystaniem usług GCP
  • projektowanie i implementację rozwiązań Data/AI z wykorzystaniem Dataproc, Dataflow, BigQuery, Cloud Composer oraz narzędzi automatyzacji

Benefity

  • możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services
  • zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie
  • dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy
Opieka zdrowotna
Karta sportowa
Scalo

Scalo

751 aktywnych ofert

Zobacz wszystkie oferty
Aplikuj teraz