Data Engineer Senior (F/M)

Zespół buduje rozwiązania Data Lake/DWH dla dużego środowiska bankowego, obejmujące zasilanie danych online i offline w środowisku on-prem oraz GCP.

• Doświadczenie w budowie rozwiązań Data Lake/DWH i datamartów
• Doświadczenie w projektowaniu i utrzymaniu pipeline'ów ETL/ELT
• Ekspercka znajomość Oracle i PostgreSQL (projektowanie, tuning SQL)
• Znajomość Google BigQuery
• Praktyczna znajomość Informatica PowerCenter
• Znajomość Kafka/Pub/Sub
• Znajomość Linuxa na poziomie zaawansowanym
• Doświadczenie w testach, wdrożeniach i rozwiązywaniu incydentów
• Gotowość do pracy w modelu DevSecOps

Nice to have:

• Python
• Airflow
• Rust
• Apache Spark

• Projektowanie i realizacja rozwiązań zasilania danych
• Budowa pipeline'ów ETL/ELT
• Praca z Oracle, PostgreSQL, BigQuery i Informatica PowerCenter
• Praca z Kafka/Pub/Sub
• Tuning zapytań SQL on-prem i w GCP
• Tworzenie rozwiązań ładowania danych w Pythonie i Rust
• Modelowanie danych i przygotowywanie datamartów
• Wsparcie testów, wdrożeń i rozwiązywania incydentów

Informujemy, że administratorem danych jest B2B.net S.A. z siedzibą w Lidzbarku, ul. Wielki Łęck 81A (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.