Kafka Engineer

Clurgo to firma stworzona przez developerów dla developerów. Nasze zespoły łączą pełne spektrum kompetencji - od rozwoju oprogramowania i infrastruktury, przez analizę oraz testy, aż po strategiczne zarządzanie produktem i procesami. Realizujemy różnorodne projekty IT dla klientów z wielu branż, dbając o dobre praktyki programistyczne i zachowanie work-life balance. Tworzymy rozwiązania, które mają znaczenie - dla firm w Polsce i na całym świecie.

• Minimum 4 lata praktycznego doświadczenia z Apache Kafka
• Biegła znajomość Confluent Platform (Enterprise) oraz Confluent Cloud
• Praktyczne doświadczenie w migracji i replikacji klastrów przy użyciu MirrorMaker 2, Cluster Linking oraz Confluent Replicator
• Znajomość środowiska AWS oraz usług: VPC, IAM, EC2, EKS, MSK, S3, KMS, Secrets
• Doświadczenie w budowie i utrzymaniu środowisk hybrydowych (on-premise ↔ AWS)
• Tworzenie infrastruktury jako kod przy użyciu Terraform (pisanie modułów, testy)
• Automatyzacja zadań za pomocą języka Python, Bash lub Ansible
• Konfiguracja pipeline'ów CI/CD w GitHub Actions, GitLab CI lub Jenkinsie
• Znajomość narzędzi monitoringu: Prometheus, Grafana, Confluent Control Center, OpenTelemetry, Elastic Stack
• Wiedza z zakresu bezpieczeństwa: TLS, SASL, ACL, RBAC oraz szyfrowanie danych

Nice to have:

• Doświadczenie w automatyzacji testów integracyjnych dedykowanych dla Kafki
• Znajomość nowoczesnych komponentów przetwarzania danych strumieniowych, takich jak Flink oraz Tableflow
• Doświadczenie w pracy w zespole projektowym klasy Enterprise w metodyce Agile (Scrum/Kanban)

• Projektowanie hybrydowej topologii Kafka łączącej infrastrukturę on-premise z AWS
• Dobór, konfiguracja oraz strojenie komponentów Confluent Platform (Schema Registry, Flink, Control Center, Tableflow)
• Tworzenie i zarządzanie klastrami Kafka (MSK, Confluent Cloud) oraz powiązanymi zasobami
• Implementacja monitoringu i systemów alertowania (Prometheus, Grafana, OpenTelemetry) oraz definiowanie SLA/SLO i runbooków
• Konfiguracja i optymalizacja mechanizmów replikacji: MirrorMaker 2, Cluster Linking oraz Replicator
• Wdrażanie infrastruktury jako kod przy użyciu Terraform (wersjonowanie, testowanie planów, automatyzacja wdrożeń)
• Definiowanie pipeline'ów wdrożeniowych (GitHub Actions, GitLab CI, Jenkins) dla klastrów, schematów danych oraz aplikacji
• Zapewnianie spójności danych oraz dbanie o niskie opóźnienia w transferze danych pomiędzy środowiskami

Informujemy, że administratorem danych jest Clurgo sp. z o.o z siedzibą w Warszawie, ul. Jasna 14/16a (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.