Data Platform Developer-Analyst

Clurgo to firma stworzona przez developerów dla developerów. Realizuje różnorodne projekty IT dla klientów z wielu branż, dbając o dobre praktyki programistyczne i zachowanie work-life balance. Obecnie prowadzi projekt dla klienta z branży bankowej, w którym programista-analityk odpowiada za projektowanie i budowę nowoczesnych rozwiązań, analizę wymagań oraz precyzyjne mapowanie danych między systemami źródłowymi, platformą streamingową a bazą ODS.

• Minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych
• Znajomość brokerów Apache Kafka, topików, partycjonowania, schematów i replikacji
• Biegła znajomość Kafka Streams oraz kSQL
• Umiejętność konfiguracji i rozwoju konektorów Kafka Connect (gotowe i własne)
• Znajomość MongoDB w zakresie projektowania schematów dokumentowych, indeksowania i optymalizacji zapytań
• Doświadczenie w implementacji serwisów GraphQL, definiowaniu schematów i resolverów
• Dobra znajomość Java i Spring Boot
• Komunikatywność i myślenie analityczne w kontakcie z interesariuszami oraz przekształcanie potrzeb w techniczną specyfikację
• Znajomość języka angielskiego na poziomie minimum B2

Nice to have:

• Podstawowa znajomość formatu tabel i zarządzania metadanymi (Apache Iceberg)
• Znajomość Python
• Doświadczenie z narzędziami monitoringu i obserwowalności: Prometheus, Grafana, OpenTelemetry
• Znajomość zagadnień bezpieczeństwa i szyfrowania danych: TLS, SASL, ACL

• Spotkania z analitykami oraz zespołami IT w celu zrozumienia procesów biznesowych i struktur danych
• Tworzenie szczegółowej dokumentacji funkcyjnej (use cases, user stories) oraz technicznej (diagramy danych, mapowanie pól)
• Projektowanie topików Kafka (nazewnictwo, partycjonowanie, schematy Avro)
• Definiowanie struktur kolekcji w MongoDB, modeli w GraphQL oraz tabel Apache Iceberg
• Budowanie mikroserwisów w Spring Boot (producent, konsument, stream processing)
• Implementacja warstwy GraphQL udostępniającej dane zgromadzone w MongoDB
• Konfiguracja, wdrażanie oraz rozwój konektorów Kafka Connect
• Tworzenie dedykowanych rozwiązań Single Message Transforms (SMT) i konwerterów danych
• Implementacja metryk, logowania i mechanizmów śledzenia przepływu zdarzeń (Prometheus, Grafana, Vector, ELK, Dynatrace)
• Diagnozowanie opóźnień, problemów z replikacją i niespójnością danych oraz optymalizacja konfiguracji systemów pod kątem wydajności
• Aktywna praca w zespole Agile oraz dzielenie się wiedzą z innymi inżynierami i analitykami (warsztaty, dokumentacja, code-review)