Senior Data Engineer Kafka / Spark (k/m), branża bankowa

140 - 190 PLN/ godz.B2B
SeniorFull-time·B2B
#452540·Dodano 5 dni temu·2
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

Apache KafkaApache SparkPySparkPythonJavaMongoDBCI/CDPrometheusGrafanaKafka

Firma i stanowisko

W Ideamotive szukamy doświadczonej osoby na stanowisko Senior Data Engineer. Dołączysz do nas, aby realizować projekty dla klientów z sektora bankowego. Skupiamy się na budowie i rozwoju platform danych opartych o Kafka, Spark oraz architekturę lakehouse. Oferujemy długoterminową współpracę, z pojedynczym projektem trwającym około roku.

Wymagania

  • Minimum 3 lata doświadczenia na stanowisku Data Engineer lub Backend Developer w obszarze przetwarzania danych.
  • Praktyczna znajomość Apache Kafka lub Apache Spark.
  • Umiejętność programowania w języku Java (Spring Boot) lub Python.
  • Doświadczenie w pracy z MongoDB lub inną bazą danych NoSQL.
  • Znajomość procesów CI/CD oraz praktyk DevOps.
  • Doświadczenie z narzędziami do monitoringu (Prometheus, Grafana, OpenTelemetry).

Nice to have:

  • Znajomość Apache Iceberg lub Delta Lake.
  • Doświadczenie z mechanizmami bezpieczeństwa Kafka (TLS, SASL, ACL).
  • Praktyczna znajomość chmury AWS.
  • Doświadczenie z Kubernetes i Terraform.
  • Wcześniejsza praca przy hurtowniach danych w branży finansowej.

Obowiązki

  • Projektowanie i rozwój przepływów danych oraz integracji.
  • Budowanie i utrzymywanie rozwiązań opartych na Kafka (Streams, Connect, ksqlDB) lub Spark.
  • Definiowanie schematów danych oraz ich transformacji.
  • Monitorowanie i optymalizacja wydajności systemów.
  • Diagnozowanie i rozwiązywanie problemów technicznych.
  • Dbanie o bezpieczeństwo przetwarzanych danych.
  • Tworzenie dokumentacji technicznej.
  • Przeprowadzanie code review.

Inne informacje

Informujemy, że administratorem danych jest Ideamotive Sp. z o. o. z siedzibą w Warszawie, ul. Złota 61/101 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.

Ideamotive

Ideamotive

62 aktywne oferty

Zobacz wszystkie oferty
Aplikuj teraz