Senior Data Engineer Kafka / Spark (k/m)

140 - 190 PLN/ godz./ godz.B2BB2B (netto)

SeniorZdalnie·WarszawaFull-time·B2B

#479842·Dodano 2 dni temu·1

Źródło: nofluffjobs.com

Aplikuj teraz

Tech Stack / Keywords

Apache Kafka Apache Spark Java Spring Boot Python MongoDBNoSQLCI/CD DevOps Prometheus Grafana ApacheTLSACLAWS Kubernetes Terraform

Podsumowanie oferty

Jako Senior Data Engineer będziesz realizować projekty dla klientów z sektora bankowego. Będziesz budować i rozwijać platformy danych oparte na Kafce, Sparku i architekturze lakehouse.

Wymagania

Minimum 3 lata doświadczenia na stanowisku Data Engineer lub Backend Developer w obszarze przetwarzania danych.
Praktyczna znajomość Apache Kafka lub Apache Spark.
Umiejętność programowania w języku Java (Spring Boot) lub Python.
Doświadczenie w pracy z MongoDB lub inną bazą danych NoSQL.
Znajomość procesów CI/CD oraz praktyk DevOps.
Doświadczenie z narzędziami do monitoringu (Prometheus, Grafana, OpenTelemetry).

Mile widziane:

Znajomość Apache Iceberg lub Delta Lake.
Doświadczenie z mechanizmami bezpieczeństwa Kafki (TLS, SASL, ACL).
Praktyczna znajomość chmury AWS.
Doświadczenie z Kubernetes i Terraform.
Wcześniejsza praca przy hurtowniach danych w branży finansowej.

Obowiązki

Projektowanie i rozwój przepływów danych oraz integracji.
Budowanie i utrzymywanie rozwiązań opartych na Kafce (Streams, Connect, ksqlDB) lub Sparku.
Definiowanie schematów danych oraz ich transformacji.
Monitorowanie i optymalizacja wydajności systemów.
Diagnozowanie i rozwiązywanie problemów technicznych.
Dbanie o bezpieczeństwo przetwarzanych danych.
Tworzenie dokumentacji technicznej.
Przeprowadzanie code review.

Benefity

Elastyczny czas pracy.
Spotkania integracyjne.

Elastyczne godziny

Spotkania integracyjne

Ideamotive

254 aktywne oferty

Zobacz wszystkie oferty

Aplikuj teraz