Data Engineer (senior / expert)
Tech Stack / Keywords
Firma i stanowisko
RITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych.
Wymagania
- Bardzo dobre doświadczenie z Google Cloud Platform.
- Bardzo dobra znajomość Python i SQL.
- Praktyczne doświadczenie z BigQuery i Cloud Storage.
- Doświadczenie z Apache Airflow lub Cloud Composer.
- Doświadczenie w budowaniu i utrzymywaniu produkcyjnych data pipeline’ów.
- Bardzo dobra znajomość data modeling, w tym data lake, DWH, Star Schema i Snowflake.
- Doświadczenie z CI/CD oraz orkiestracją pipeline’ów.
- Umiejętność projektowania skalowalnych i łatwych w utrzymaniu rozwiązań.
- Znajomość praktyk związanych z data quality, testing i observability.
Nice to have:
- Doświadczenie z PySpark.
- Znajomość ekosystemu Spark i/lub Hadoop.
- Doświadczenie ze streamingiem lub rozwiązaniami big data.
- Background w tworzeniu backend services w Pythonie.
Obowiązki
- Projektowanie i rozwój skalowalnych data pipeline’ów na GCP z wykorzystaniem Python i SQL.
- Integracja danych m.in. z BigQuery i Cloud Storage.
- Projektowanie i implementacja transformacji danych.
- Orkiestracja workflowów z wykorzystaniem Apache Airflow / Cloud Composer.
- Projektowanie modeli danych i architektury pipeline’ów.
- Współpraca z Data Architectami, Data Delivery Leadami oraz Business Analystami.
- Budowanie rozwiązań zapewniających wysoką jakość danych i kodu: audytowalność, możliwość ponownego uruchomienia, modularność, reużywalność i testy jednostkowe.
- Udział w procesach CI/CD i automatyzacji wdrożeń.
- Rozwój data lake, data warehouse oraz modeli wymiarowych (Star Schema / Snowflake).
- Dbanie o jakość, testowalność i obserwowalność procesów danych.
Benefity
- Lokalizacja: Kraków – praca z biura 6–8 dni w miesiącu
- Stawka B2B Senior: do 160 PLN/h netto + VAT
- Stawka B2B Expert: do 180 PLN/h netto + VAT
Inne informacje
Informujemy, że administratorem danych jest Relyon IT Services z siedzibą w Warszawie, ul. ul. Wołoska 9 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
RITS
250 aktywnych ofert