Data Platform Developer (Kafka)

Clurgo to firma stworzona przez developerów dla developerów. Nasze zespoły łączą pełne spektrum kompetencji - od rozwoju oprogramowania i infrastruktury, przez analizę oraz testy, aż po strategiczne zarządzanie produktem i procesami. Realizujemy różnorodne projekty IT dla klientów z wielu branż, dbając o dobre praktyki programistyczne i zachowanie work-life balance. Tworzymy rozwiązania, które mają znaczenie - dla firm w Polsce i na całym świecie.

Dołącz do projektu dla klienta z branży bankowej, w którym będziesz odpowiadać za projektowanie, budowę i utrzymanie nowoczesnych, skalowalnych rozwiązań event-driven. Architektura platformy opiera się na Apache Kafka (Streams, Connect, kSQL), Spring Boot, GraphQL, MongoDB oraz Apache Iceberg. Rozwiązania wdrażamy zarówno w środowiskach chmurowych, jak i on-premise.

• Minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych
• Biegła znajomość Kafka Streams oraz kSQL, brokerów, topików, konsumentów, producentów i mechanizmów replikacji
• Umiejętność konfigurowania i rozwijania konektorów Kafka Connect (gotowych i własnych)
• Biegłość w języku Java oraz frameworku Spring (Boot, Cloud, Security, Data)
• Znajomość MongoDB pod kątem projektowania schematów dokumentowych, indeksowania oraz optymalizacji zapytań
• Doświadczenie w implementacji serwisów GraphQL (np. Spring GraphQL), definiowaniu schematów i resolverów
• Znajomość języka angielskiego na poziomie minimum B2
• Doświadczenie w pracy w metodologii Agile (Scrum/Kanban) oraz z narzędziami Jira/Confluence

Nice to have:

• Podstawowa znajomość formatu tabel i zarządzania metadanymi (Apache Iceberg)
• Znajomość języka Python
• Doświadczenie z narzędziami monitoringu i obserwowalności: Prometheus, Grafana, OpenTelemetry
• Znajomość zagadnień bezpieczeństwa: TLS, SASL, ACL oraz szyfrowania danych

• Opracowywanie prototypów i pełnych rozwiązań event-driven przy użyciu Apache Kafka, Kafka Connect, Kafka Streams, kSQL
• Definiowanie schematów danych (Avro/Protobuf/JSON Schema) oraz ich wersjonowania
• Tworzenie mikroserwisów w Spring Boot obsługujących zdarzenia Kafka (producent, konsument, stream processing)
• Budowa warstwy API GraphQL z wykorzystaniem Quarkus/GraalVM udostępniającej dane z MongoDB
• Konfiguracja i rozwój konektorów Kafka Connect (source/sink) do MongoDB, S3, Apache Iceberg i innych systemów
• Zapewnienie transformacji danych przy pomocy Single Message Transforms (SMT)
• Implementacja metryk (Prometheus, Grafana), logowania (Vector, ELK) oraz śledzenia (OpenTelemetry, Dynatrace)
• Diagnostyka problemów z replikacją, opóźnieniami oraz strojenie konfiguracji Kafki
• Praca w zespole Agile oraz aktywne dzielenie się wiedzą poprzez warsztaty i dokumentację