RITS
RITS
New

Data Engineer (GCP) | Senior / Expert

140 - 180 PLN/ godz.B2B
SeniorFull-time·B2B
#377624·Dodano wczoraj·0
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

GCPPythonSQLBigQueryCloud StorageCI/CDData LakeDWHStar SchemaSnowflake

Firma i stanowisko

RITS Group to firma informatyczna oferująca usługi programistyczne dla rynku polskiego i międzynarodowego, należąca do najszybciej rozwijających się spółek technologicznych.

Wymagania

  • Bardzo dobra znajomość Google Cloud Platform (GCP).
  • Bardzo dobra znajomość Python oraz SQL.
  • Doświadczenie z BigQuery i Cloud Storage.
  • Praktyczna znajomość Apache Airflow lub Cloud Composer.
  • Doświadczenie w budowie i utrzymaniu produkcyjnych pipeline'ów danych.
  • Znajomość modelowania danych (Data Lake, DWH, Star Schema, Snowflake).
  • Doświadczenie z CI/CD oraz orkiestracją pipeline'ów.
  • Umiejętność projektowania skalowalnych i łatwych w utrzymaniu rozwiązań.
  • Doświadczenie w obszarze jakości danych, testowania i observability.

Nice to have:

  • Doświadczenie z PySpark.
  • Znajomość ekosystemów Spark i/lub Hadoop.
  • Doświadczenie z rozwiązaniami do streamingu danych lub Big Data.
  • Doświadczenie w tworzeniu backendów w Pythonie.

Obowiązki

  • Projektowanie i rozwój skalowalnych pipeline'ów danych w Google Cloud Platform z wykorzystaniem Python i SQL.
  • Integracja danych z usług takich jak BigQuery i Cloud Storage.
  • Tworzenie i optymalizacja procesów transformacji danych.
  • Współpraca z Data Architectami, Data Delivery Leadami oraz Business Analystami przy projektowaniu rozwiązań.
  • Projektowanie modeli danych oraz architektury pipeline'ów.
  • Orkiestracja procesów z wykorzystaniem Apache Airflow / Cloud Composer.
  • Dbanie o jakość rozwiązań poprzez testy, audytowalność, możliwość ponownego uruchamiania procesów oraz modułową architekturę.
  • Współtworzenie procesów CI/CD i automatyzacja wdrożeń.
  • Rozwój rozwiązań opartych o Data Lake, Data Warehouse oraz modele Star Schema i Snowflake.

Benefity

  • Model pracy hybrydowy: Senior 6 dni w miesiącu w biurze, Expert 4 dni w miesiącu w biurze.
  • Stawka B2B: Senior do 160 PLN/h, Expert do 180 PLN/h.
  • Program poleceń z nagrodą do 5000 zł.

Inne informacje

Informujemy, że administratorem danych jest Relyon IT Services z siedzibą w Warszawie. Podanie danych obowiązkowych jest wymagane zgodnie z Kodeksem pracy. Dane będą przetwarzane w celu realizacji procesu rekrutacji oraz mogą być przetwarzane na podstawie zgody do udziału w przyszłych rekrutacjach. Zgoda może być wycofana w dowolnym momencie.

RITS

RITS

31 aktywnych ofert

Zobacz wszystkie oferty
Aplikuj teraz