Avenga
Avenga
New

Senior Python Engineer

135 - 145 PLN/ godz.B2B
SeniorFull-time·B2B
#433443·Dodano 5 dni temu·1
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

PythonSQLGoogle Cloud PlatformBigQueryAirflowDBTdata processingdata validationData quality projectsdata governance

Firma i stanowisko

Dołącz do zespołu, który buduje rozwiązania odpowiadające za jakość danych w skali całego banku. W ramach nowego programu rozwijamy nowoczesne rozwiązania, które pozwalają wykrywać i eliminować problemy z jakością danych już na etapie ich wprowadzania do systemów bankowych.

Wymagania

Must have:

  • Doświadczenie jako Python Engineer, Data Engineer lub Software Engineer w projektach związanych z danymi
  • Bardzo dobra znajomość Pythona
  • Bardzo dobra znajomość SQL
  • Praktyczne doświadczenie z Google Cloud Platform
  • Doświadczenie w budowie i rozwoju procesów przetwarzania danych
  • Znajomość BigQuery
  • Doświadczenie z Airflow/Composer
  • Znajomość usług GCP związanych z przetwarzaniem i zarządzaniem danymi
  • Znajomość DBT
  • Znajomość procesu budowania, wersjonowania i zarządzania artefaktami aplikacyjnymi
  • Silne kompetencje analityczne i umiejętność samodzielnego rozwiązywania problemów

Mile widziane:

  • Doświadczenie w projektach jakości danych (data quality)
  • Znajomość zagadnień związanych z data governance
  • Doświadczenie w projektowaniu reguł walidacyjnych i mechanizmów kontroli jakości danych
  • Doświadczenie w środowisku bankowym lub finansowym
  • Znajomość architektury nowoczesnych platform danych
  • Doświadczenie z CI/CD oraz automatyzacją procesów wdrażania

Obowiązki

  • Projektowanie i rozwój komponentów do przetwarzania oraz walidacji danych
  • Tworzenie aplikacji i procesów integracyjnych w Pythonie i SQL
  • Implementacja mechanizmów kontroli i monitorowania jakości danych
  • Rozwój pipeline'ów danych w środowisku Google Cloud Platform (GCP)
  • Praca z usługami BigQuery, Dataproc, Dataplex oraz Composer/Airflow
  • Analiza problemów z jakością danych i identyfikowanie ich źródeł
  • Współpraca z zespołami przy definiowaniu i wdrażaniu reguł walidacyjnych
  • Udział w projektowaniu i budowie procesu walidacji danych
  • Rozwój oraz utrzymanie kodu zgodnie ze standardami technicznymi i architektonicznymi
  • Praca z DBT w procesach transformacji i kontroli jakości danych

Inne informacje

Informujemy, że administratorem danych jest Avenga z siedzibą w Gdańsku, Biurowiec Officyna, Aleja Grunwaldzka 48/50 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.

Avenga

Avenga

40 aktywnych ofert

Zobacz wszystkie oferty
Aplikuj teraz