Data Platform Developer-Analyst (Kafka)

120 - 150 PLN/ godz./ godz.B2BB2B (netto)

SeniorHybryda·WrocławInne·B2B

#473490·Dodano wczoraj·1

Źródło: justjoin.it

Aplikuj teraz

Tech Stack / Keywords

KafkaKafka ConnectJava GraphQLKafka StreamskSQLMongoDB Spring Boot

Podsumowanie oferty

W projekcie dla klienta z branży bankowej będziesz analizować wymagania i mapować dane między systemami źródłowymi, platformą streamingową a bazą ODS. Będziesz projektować i budować rozwiązania oparte na Apache Kafka, MongoDB, GraphQL, Java i Spring Boot, współpracując z analitykami oraz zespołami IT.

Wymagania

Minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych.
Znajomość brokerów Apache Kafka, w tym topików, partycjonowania, schematów i replikacji, oraz biegła znajomość Kafka Streams i kSQL.
Umiejętność sprawnego konfigurowania i rozwijania konektorów Kafka Connect, zarówno gotowych, jak i własnych.
Znajomość MongoDB w zakresie projektowania schematów dokumentowych, indeksowania oraz optymalizacji zapytań.
Doświadczenie w implementacji serwisów GraphQL oraz definiowaniu schematów i resolverów.
Dobra znajomość Java i Spring Boot.
Świetna komunikatywność i myślenie analityczne; umiejętność rozmowy z interesariuszami, rozumienia ich potrzeb i przekształcania ich w techniczną specyfikację.
Znajomość języka angielskiego na poziomie minimum B2.

Mile widziane:

Podstawowa znajomość formatu tabel i zarządzania metadanymi (Apache Iceberg).
Znajomość Python.
Doświadczenie z narzędziami monitoringu i obserwowalności: Prometheus, Grafana, OpenTelemetry.
Znajomość zagadnień bezpieczeństwa i szyfrowania danych: TLS, SASL, ACL.

Obowiązki

Spotkania z analitykami oraz zespołami IT w celu dokładnego zrozumienia procesów biznesowych i struktur danych.
Tworzenie szczegółowej dokumentacji funkcyjnej (use cases, user stories) oraz technicznej (diagramy danych, mapowanie pól).
Projektowanie topików Kafka (nazewnictwo, partycjonowanie, schematy Avro).
Definiowanie struktur kolekcji w MongoDB oraz modeli w GraphQL i tabel Iceberg.
Budowanie mikroserwisów w Spring Boot (producent, konsument, stream processing).
Implementacja warstwy GraphQL udostępniającej dane zgromadzone w MongoDB.
Konfiguracja, wdrażanie oraz rozwój konektorów Kafka Connect.
Tworzenie dedykowanych rozwiązań Single Message Transforms (SMT) i konwerterów danych.
Implementacja metryk, logowania i mechanizmów śledzenia przepływu zdarzeń (Prometheus, Grafana, Vector, ELK, Dynatrace).
Diagnozowanie opóźnień, problemów z replikacją i niespójnością danych oraz optymalizacja konfiguracji systemów pod kątem wydajności.
Aktywna praca w zespole Agile oraz dzielenie się wiedzą z innymi inżynierami i analitykami (warsztaty, dokumentacja, code review).

Benefity

Opieka medyczna.
Karta MultiSport.
Lekcje języka angielskiego.
Integracje zespołowe.

Opieka zdrowotna

Karta sportowa

Kursy językowe

Spotkania integracyjne

Inne informacje

Proces rekrutacji obejmuje rozmowę rekrutacyjną, rozmowę dotyczącą doświadczenia i kompetencji oraz informację zwrotną po jego zakończeniu.

Clurgo

79 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz