Senior Data Engineer Kafka / Spark (k/m), branża bankowa
Tech Stack / Keywords
Firma i stanowisko
W Ideamotive szukamy doświadczonej osoby na stanowisko Senior Data Engineer. Dołączysz do nas, aby realizować projekty dla klientów z sektora bankowego. Skupiamy się na budowie i rozwoju platform danych opartych o Kafka, Spark oraz architekturę lakehouse. Oferujemy długoterminową współpracę, z pojedynczym projektem trwającym około roku.
Wymagania
- Minimum 3 lata doświadczenia na stanowisku Data Engineer lub Backend Developer w obszarze przetwarzania danych.
- Praktyczna znajomość Apache Kafka lub Apache Spark.
- Umiejętność programowania w języku Java (Spring Boot) lub Python.
- Doświadczenie w pracy z MongoDB lub inną bazą danych NoSQL.
- Znajomość procesów CI/CD oraz praktyk DevOps.
- Doświadczenie z narzędziami do monitoringu (Prometheus, Grafana, OpenTelemetry).
Nice to have:
- Znajomość Apache Iceberg lub Delta Lake.
- Doświadczenie z mechanizmami bezpieczeństwa Kafka (TLS, SASL, ACL).
- Praktyczna znajomość chmury AWS.
- Doświadczenie z Kubernetes i Terraform.
- Wcześniejsza praca przy hurtowniach danych w branży finansowej.
Obowiązki
- Projektowanie i rozwój przepływów danych oraz integracji.
- Budowanie i utrzymywanie rozwiązań opartych na Kafka (Streams, Connect, ksqlDB) lub Spark.
- Definiowanie schematów danych oraz ich transformacji.
- Monitorowanie i optymalizacja wydajności systemów.
- Diagnozowanie i rozwiązywanie problemów technicznych.
- Dbanie o bezpieczeństwo przetwarzanych danych.
- Tworzenie dokumentacji technicznej.
- Przeprowadzanie code review.
Inne informacje
Informujemy, że administratorem danych jest Ideamotive Sp. z o. o. z siedzibą w Warszawie, ul. Złota 61/101 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
Ideamotive
62 aktywne oferty