Data Engineer
Brak informacji o wynagrodzeniu
SeniorFull-time
#340338·Dodano dziś·0
Źródło: nofluffjobs.comTech Stack / Keywords
CloudETLRelacyjne Bazy DanychREST APIGCPApache AirflowKafkaPUBPythonPySparkRustGitJenkinsMicroservicesJavaLinux
Firma i stanowisko
Otwieramy nową rekrutację na rzecz banku PKO BP na stanowisko Data Engineer.
Wymagania
- Co najmniej 5 lat doświadczenia jako Developer ETL w integracji danych on-prem
- Ekspercka znajomość relacyjnych baz danych Oracle i PostgreSQL
- Zaawansowana znajomość narzędzi ETL on-prem (Informatica Power Center)
- Bardzo dobra znajomość narzędzi harmonogramujących
- Umiejętność wystawiania usług REST API
- Co najmniej 3 lata doświadczenia jako Data Engineer na GCP
- Znajomość narzędzi ETL na GCP: Apache Airflow, GCP Data Flow, GCP Data Proc
- Znajomość baz danych GCP: Big Query, Big Table, Scylla Cloud
- Doświadczenie z kolejkami Kafka, GCP Pub/Sub
- Co najmniej 3 lata doświadczenia programistycznego w Python i PySpark
- Znajomość języka Rust do pisania narzędzi i frameworków
- Znajomość narzędzi GIT i Jenkins
Nice to have:
- Znajomość narzędzia harmonogramującego Automate Now firmy Infinity Data
- Podstawowa wiedza programowania MicroServices w języku Java
- Zaawansowana znajomość systemu operacyjnego Linux
- Doświadczenie w pracy z dużymi wolumenami danych (~100TB)
- Umiejętności analitycznego myślenia, samodzielność, kreatywność, terminowość i rzetelność
Obowiązki
- Projektowanie, budowa i tuning relacyjnych baz danych Oracle i PostgreSQL
- Zaawansowane korzystanie z narzędzi ETL na on-prem (Informatica Power Center)
- Korzystanie z narzędzi harmonogramujących
- Wystawianie usług REST API
- Praca z narzędziami ETL na GCP: Apache Airflow, GCP Data Flow, GCP Data Proc
- Projektowanie, budowa i tuning baz danych GCP: Big Query, Big Table, Scylla Cloud
- Korzystanie z kolejek Kafka, GCP Pub/Sub
- Programowanie w Python (integracja i analiza danych) oraz PySpark
- Programowanie w Rust do pisania narzędzi i frameworków wspomagających ładowanie danych
- Korzystanie z repozytorium GIT i Jenkins
- Praca w trybie 4 dni zdalnie, 1 dzień w biurze w Warszawie
Oferta
- Forma współpracy: B2B
- Tryb pracy: 4 dni zdalnie, 1 dzień w biurze w Warszawie (Chmielna)
Inne informacje
Oferta pracy na rzecz banku PKO BP. Wymagany tryb pracy hybrydowy: 4 dni zdalnie, 1 dzień w biurze w Warszawie.
PKO Finat Sp. z o.o.
19 aktywnych ofert