Kafka Engineer

W ITLT pomagamy naszym zaprzyjaźnionym firmom przekształcać ambitne pomysły w cyfrową rzeczywistość. Z nastawieniem na wyzwania, ciekawość technologii i zwinność - współtworzymy wyjątkowe rozwiązania IT.

• Minimum 4 lata doświadczenia z Apache Kafka
• Bardzo dobra znajomość Confluent Platform (Enterprise) oraz Confluent Cloud
• Doświadczenie w migracji i replikacji klastrów Kafka (MirrorMaker 2, Cluster Linking, Confluent Replicator)
• Praktyczna znajomość AWS (VPC, IAM, EC2, EKS, MSK, S3, KMS, Secrets Manager)
• Doświadczenie w budowie i utrzymaniu środowisk hybrydowych on-prem ↔ AWS
• Znajomość Terraform - tworzenie modułów, wersjonowanie, testowanie planów (mile widziane Terratest i tfsec)
• Doświadczenie z Ansible
• Doświadczenie z CI/CD (GitHub Actions, GitLab CI lub Jenkins)
• Programowanie / scripting: Python, Ansible, Bash
• Automatyzacja testów integracyjnych dla Kafka
• Monitoring i observability (Prometheus, Grafana, Confluent Control Center, OpenTelemetry, Elastic Stack)
• Znajomość security w Kafka: TLS, SASL, ACL, RBAC, szyfrowanie danych at rest / in transit

• Projektowanie i rozwój hybrydowej architektury Kafka on-prem ↔ AWS
• Dobór i konfiguracja komponentów Confluent Platform (m.in.: Schema Registry, Flink, Control Center, Tableflow)
• Budowa i konfiguracja środowiska Kafka w AWS, w tym MSK, EKS i powiązanych usług
• Implementacja replikacji i synchronizacji danych pomiędzy klastrami on-prem i AWS
• Konfiguracja i utrzymanie MirrorMaker 2, Cluster Linking, Confluent Replicator
• Zapewnienie spójności danych oraz niskich opóźnień podczas replikacji
• Projektowanie i wdrażanie CI/CD dla Kafki, schematów oraz aplikacji konsumenckich
• Tworzenie i utrzymanie Infrastructure-as-Code w Terraform
• Automatyzacja wdrożeń, testów oraz infrastruktury
• Implementacja i utrzymanie monitoringu oraz observability: Prometheus, Grafana, Control Center, OpenTelemetry, Elastic
• Tworzenie runbooków, alertów oraz SLA/SLO
• Rozwiązywanie incydentów i problemów technicznych podczas budowy oraz utrzymania rozwiązania
• Optymalizacja wydajności i tuning konfiguracji Kafka
• Współpraca z zespołem Data Platform, Data Engineering, DevOps i Security
• Mentoring mniej doświadczonych inżynierów i prowadzenie warsztatów technicznych