Data Platform Developer (Kafka)

Clurgo to firma działająca w sektorze IT, realizująca różnorodne projekty informatyczne dla klientów z wielu branż, w tym z branży bankowej. Specjalizuje się w rozwoju oprogramowania, infrastrukturze, analizie, testach oraz zarządzaniu produktem i procesami.

• Minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych
• Biegła znajomość Kafka Streams, kSQL, brokerów, topików, konsumentów, producentów oraz mechanizmów replikacji
• Umiejętność konfigurowania i rozwijania konektorów Kafka Connect (gotowych oraz własnych)
• Biegłość w języku Java oraz frameworku Spring (Boot, Cloud, Security, Data)
• Znajomość MongoDB w zakresie projektowania schematów dokumentowych, indeksowania i optymalizacji zapytań
• Doświadczenie w implementacji serwisów GraphQL (np. Spring GraphQL), definiowaniu schematów i resolverów
• Znajomość języka angielskiego na poziomie minimum B2
• Doświadczenie w pracy w metodologii Agile (Scrum/Kanban) oraz z narzędziami Jira/Confluence

Nice to have:

• Podstawowa znajomość formatów tabel i zarządzania metadanymi (Apache Iceberg)
• Znajomość języka Python
• Doświadczenie z narzędziami monitoringu i obserwowalności: Prometheus, Grafana, OpenTelemetry
• Znajomość zagadnień bezpieczeństwa: TLS, SASL, ACL oraz szyfrowania danych

• Opracowywanie prototypów i pełnych rozwiązań event-driven z wykorzystaniem Apache Kafka, Kafka Connect, Kafka Streams, kSQL
• Definiowanie schematów danych (Avro/Protobuf/JSON Schema) oraz ich wersjonowanie
• Tworzenie mikroserwisów w Spring Boot obsługujących zdarzenia Kafka (producent, konsument, stream processing)
• Budowa warstwy API GraphQL z wykorzystaniem Quarkus/GraalVM udostępniającej dane z MongoDB
• Konfiguracja i rozwój konektorów Kafka Connect (source/sink) do MongoDB, S3, Apache Iceberg i innych systemów
• Zapewnienie transformacji danych przy pomocy Single Message Transforms (SMT)
• Implementacja metryk (Prometheus, Grafana), logowania (Vector, ELK) oraz śledzenia (OpenTelemetry, Dynatrace)
• Diagnostyka problemów z replikacją, opóźnieniami oraz strojenie (tuning) konfiguracji Kafki
• Praca w zespole Agile oraz aktywne dzielenie się wiedzą poprzez warsztaty i dokumentację