IT Architect
Brak informacji o wynagrodzeniu
MidFull-time
#414002·Dodano 20 dni temu·3
Źródło: Edge One SolutionsTech Stack / Keywords
GCPPythonPySparkBigQueryCloudApache AirflowETLGitHub
Firma i stanowisko
Nasz klient to jeden z trzech największych polskich banków uniwersalnych, jak również jedna z największych instytucji finansowych w obszarze Europy Środkowo-Wschodniej. Jako pierwszy polski bank uruchomił bankomat i wydał kartę kredytową.
Wymagania
- Minimum 3 lata doświadczenia na stanowisku Data Engineer, GCP Developer lub podobnym
- Bardzo dobra znajomość Python, PySpark oraz SQL
- Praktyczne doświadczenie w pracy z BigQuery oraz dbt Core
- Doświadczenie z Cloud Composer / Apache Airflow, Cloud Storage oraz Pub/Sub
- Doświadczenie w projektowaniu i budowie procesów ETL/ELT
- Doświadczenie w przetwarzaniu dużych zbiorów danych
- Znajomość GitHub, CI/CD oraz dobrych praktyk wytwarzania oprogramowania
- Doświadczenie w przygotowywaniu testów jednostkowych, integracyjnych lub testów jakości danych
- Znajomość języka angielskiego umożliwiająca swobodną pracę z dokumentacją techniczną
Nice to have:
- Znajomość Google Cloud Dataproc lub Dataflow
- Doświadczenie w budowie i utrzymaniu procesów streamingowych
- Znajomość Terraform oraz podejścia Infrastructure as Code
- Doświadczenie w obszarze Data Quality i Data Governance
- Znajomość specyfiki branży finansowej lub bankowej
Obowiązki
- Wdrażanie modeli danych przygotowanych przez architektów i modelarzy
- Projektowanie i tworzenie procesów ETL/ELT działających w trybie batch oraz streaming
- Rozwój modeli, transformacji oraz testów z wykorzystaniem dbt Core i PySpark
- Tworzenie, rozwój i utrzymanie DAG-ów w Apache Airflow / Cloud Composer
- Implementowanie mechanizmów walidacji i kontroli jakości danych
- Współpraca przy tworzeniu generatorów oraz frameworków wspierających procesy zasileń danych
- Przygotowywanie i rozwijanie testów jednostkowych, integracyjnych oraz jakościowych
- Tworzenie i aktualizowanie dokumentacji technicznej
- Wsparcie procesów wdrożeniowych na środowiska TEST, PREPROD oraz PROD
Benefity
- Indywidualne wsparcie Service Delivery Managera pomagającego w planowaniu ścieżki kariery
- Finansowanie lub dofinansowanie szkoleń, certyfikatów i konferencji technicznych
- Program #SmartChange umożliwiający zmianę projektu zgodnie z preferencjami
- Wyjścia integracyjne, aktywności sportowe oraz webinary #edge1talks
- Wsparcie sportowych inicjatyw i wynajem sal treningowych
- Pakiet zdrowotny obejmujący prywatną opiekę, kartę sportową, ubezpieczenie i platformę wsparcia psychologicznego
- Elastyczne benefity w systemie punktowym do samodzielnego wyboru
Szkolenia wewnętrzne
Dofinansowanie szkoleń
Spotkania integracyjne
Karta sportowa
Opieka zdrowotna
Ubezpieczenie
Elastyczne godziny
Edge One Solutions
364 aktywne oferty