Data Engineer (senior / expert)

RITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych. Naszym priorytetem jest jakość oraz innowacyjność dostarczanych rozwiązań, a nasza kultura organizacyjna opiera się na zaufaniu, współpracy i ciągłym doskonaleniu.

• Bardzo dobre doświadczenie z Google Cloud Platform.
• Bardzo dobra znajomość Python i SQL.
• Praktyczne doświadczenie z BigQuery i Cloud Storage.
• Doświadczenie z Apache Airflow lub Cloud Composer.
• Doświadczenie w budowaniu i utrzymywaniu produkcyjnych data pipeline’ów.
• Bardzo dobra znajomość data modeling, w tym data lake, DWH, Star Schema i Snowflake.
• Doświadczenie z CI/CD oraz orkiestracją pipeline’ów.
• Umiejętność projektowania skalowalnych i łatwych w utrzymaniu rozwiązań.
• Znajomość praktyk związanych z data quality, testing i observability.

Nice to have:

• Doświadczenie z PySpark.
• Znajomość ekosystemu Spark i/lub Hadoop.
• Doświadczenie ze streamingiem lub rozwiązaniami big data.
• Background w tworzeniu backend services w Pythonie.

• Projektowanie i rozwój skalowalnych data pipeline’ów na GCP z wykorzystaniem Python i SQL.
• Integracja danych m.in. z BigQuery i Cloud Storage.
• Projektowanie i implementacja transformacji danych.
• Orkiestracja workflowów z wykorzystaniem Apache Airflow / Cloud Composer.
• Projektowanie modeli danych i architektury pipeline’ów.
• Współpraca z Data Architectami, Data Delivery Leadami oraz Business Analystami.
• Budowanie rozwiązań zapewniających wysoką jakość danych i kodu: audytowalność, możliwość ponownego uruchomienia, modularność, reużywalność i testy jednostkowe.
• Udział w procesach CI/CD i automatyzacji wdrożeń.
• Rozwój data lake, data warehouse oraz modeli wymiarowych (Star Schema / Snowflake).
• Dbanie o jakość, testowalność i obserwowalność procesów danych.