IT Architect
Brak informacji o wynagrodzeniu
SeniorFull-time·Umowa o pracę
#414224·Dodano 9 dni temu·0
Źródło: justjoin.itTech Stack / Keywords
GCPPythonPySparkSQLBigQuery
Firma i stanowisko
Społeczność Edge One Solutions liczy ponad 350 ekspertów i jest częścią Grupy Euvic, w której jest 5500 osób. Nasz klient to jeden z trzech największych polskich banków uniwersalnych oraz jedna z największych instytucji finansowych w Europie Środkowo-Wschodniej.
Wymagania
- Minimum 3 lata doświadczenia na stanowisku Data Engineer, GCP Developer lub podobnym
- Bardzo dobra znajomość Python, PySpark oraz SQL
- Praktyczne doświadczenie w pracy z BigQuery oraz dbt Core
- Doświadczenie z Cloud Composer / Apache Airflow, Cloud Storage oraz Pub/Sub
- Doświadczenie w projektowaniu i budowie procesów ETL/ELT
- Doświadczenie w przetwarzaniu dużych zbiorów danych
- Znajomość GitHub, CI/CD oraz dobrych praktyk wytwarzania oprogramowania
- Doświadczenie w przygotowywaniu testów jednostkowych, integracyjnych lub testów jakości danych
- Znajomość języka angielskiego umożliwiająca swobodną pracę z dokumentacją techniczną
Nice to have:
- Znajomość Google Cloud Dataproc lub Dataflow
- Doświadczenie w budowie i utrzymaniu procesów streamingowych
- Znajomość Terraform oraz podejścia Infrastructure as Code
- Doświadczenie w obszarze Data Quality i Data Governance
- Znajomość specyfiki branży finansowej lub bankowej
Obowiązki
- Wdrażanie modeli danych przygotowanych przez architektów i modelarzy
- Projektowanie i tworzenie procesów ETL/ELT działających w trybie batch oraz streaming
- Rozwój modeli, transformacji oraz testów z wykorzystaniem dbt Core i PySpark
- Tworzenie, rozwój i utrzymanie DAG-ów w Apache Airflow / Cloud Composer
- Implementowanie mechanizmów walidacji i kontroli jakości danych
- Współpraca przy tworzeniu generatorów oraz frameworków wspierających procesy zasileń danych
- Przygotowywanie i rozwijanie testów jednostkowych, integracyjnych oraz jakościowych
- Tworzenie i aktualizowanie dokumentacji technicznej
- Wsparcie procesów wdrożeniowych na środowiska TEST, PREPROD oraz PROD
Benefity
- Indywidualne wsparcie Service Delivery Managera pomagającego w planowaniu ścieżki kariery
- Szkolenia, certyfikaty i konferencje z dofinansowaniem lub pełnym pokryciem kosztów
- Możliwość zmiany projektu zgodnie z preferencjami (#SmartChange)
- Wsparcie work-life balance poprzez integracje, aktywności sportowe i webinary (#edge1talks)
- Wspieranie inicjatyw sportowych i wynajem sal treningowych
- Pakiet zdrowotny obejmujący prywatną opiekę medyczną, kartę sportową, ubezpieczenie i wsparcie psychologiczne
- Elastyczne benefity w systemie punktowym do samodzielnego wykorzystania
Dofinansowanie szkoleń
Budżet konferencyjny
Spotkania integracyjne
Karta sportowa
Opieka zdrowotna
Ubezpieczenie
Elastyczne godziny
Inne informacje
Informujemy, że administratorem danych jest Edge One Solutions sp. z siedzibą w Warszawie. Podanie danych obowiązkowych jest niezbędne do realizacji procesu rekrutacji. Dane są przetwarzane zgodnie z prawem do czasu zakończenia rekrutacji i ewentualnego dochodzenia roszczeń. Zgoda na udział w przyszłych rekrutacjach może zostać wycofana w dowolnym momencie.
Edge One Solutions
311 aktywnych ofert