Senior Kafka Engineer

120 - 150 PLN/ godz./ godz.B2BB2B (netto)

SeniorZdalnie·WrocławFull-time·B2B

#480190·Dodano 2 dni temu·1

Źródło: nofluffjobs.com

Aplikuj teraz

Tech Stack / Keywords

Apache KafkaCloudAWSVPCIAMAWS EC2Amazon EKSMSKAWS S3KMSTerraform Ansible CI/CD GitHub Actions GitLab CI Jenkins Python Bash Prometheus GrafanaElastic StackTLSACLRBACScrum Kanban Kafka

Podsumowanie oferty

Projekt dla klienta z sektora finansowego obejmuje budowę hybrydowego środowiska Kafka, łączącego klastry on-premise z chmurą AWS. W zespole Data Platform będziesz wdrażać replikację danych oraz procesy CI/CD i Infrastructure as Code z użyciem Terraform.

Wymagania

Minimum 4 lata komercyjnego doświadczenia w pracy z Apache Kafka.
Biegła znajomość Confluent Platform w wersji Enterprise oraz Confluent Cloud.
Praktyczne doświadczenie w migracji i replikacji klastrów przy użyciu MirrorMaker 2, Cluster Linking lub Confluent Replicator.
Dobra znajomość chmury AWS i jej usług (VPC, IAM, EC2, EKS, MSK, S3, KMS, Secrets Manager).
Doświadczenie w budowie i utrzymaniu środowisk hybrydowych.
Umiejętność pisania kodu infrastruktury w Terraform oraz znajomość Ansible.
Praktyczna znajomość narzędzi CI/CD (GitHub Actions, GitLab CI lub Jenkins).
Umiejętność tworzenia skryptów w językach Python i Bash.
Doświadczenie z narzędziami do monitoringu (Prometheus, Grafana, OpenTelemetry, Elastic Stack).
Znajomość zagadnień bezpieczeństwa (TLS, SASL, ACL, RBAC, szyfrowanie danych).
Doświadczenie w pracy w środowisku zwinnym (Scrum, Kanban).

Obowiązki

Projektowanie hybrydowej topologii Kafka łączącej środowisko on-premise z AWS.
Dobór i konfiguracja komponentów Confluent Platform, takich jak Schema Registry, Flink, Control Center czy Tableflow.
Tworzenie klastrów Kafka w AWS (MSK, Confluent Cloud) oraz wdrażanie monitoringu opartego na Prometheus i Grafana.
Konfiguracja narzędzi do replikacji i synchronizacji danych (MirrorMaker 2, Cluster Linking, Replicator) z zachowaniem spójności i niskich opóźnień.
Definiowanie procesów CI/CD dla wdrożeń Kafka, schematów i aplikacji konsumenckich.
Implementacja infrastruktury w modelu IaC przy użyciu Terraform.
Tworzenie run-booków, obsługa incydentów, optymalizacja wydajności oraz strojenie konfiguracji.
Dzielenie się wiedzą i mentoring techniczny mniej doświadczonych członków zespołu.

Benefity

Elastyczny czas pracy.
Spotkania integracyjne.

Elastyczne godziny

Spotkania integracyjne

Ideamotive

254 aktywne oferty

Zobacz wszystkie oferty

Aplikuj teraz