Data Platform Engineer (Azure & Databricks)

Nasz Klient to międzynarodowa organizacja rozwijająca nowoczesne rozwiązania technologiczne wspierające zarządzanie, przetwarzanie i wykorzystanie danych. Projekt koncentruje się na rozwoju oraz utrzymaniu platformy danych opartej na usługach Microsoft Azure.

• Minimum 4 lata komercyjnego doświadczenia w obszarze Data Platform Engineering, Cloud Engineering lub pokrewnym
• Bardzo dobra znajomość Microsoft Azure i doświadczenie w projektowaniu oraz utrzymaniu infrastruktury chmurowej
• Praktyczne doświadczenie z Azure Databricks oraz konfiguracją środowisk do przetwarzania danych
• Doświadczenie z Terraform i zarządzaniem infrastrukturą jako kod (Infrastructure as Code)
• Bardzo dobra znajomość Azure Data Lake oraz architektury przechowywania danych w chmurze
• Praktyczne doświadczenie z Azure Data Factory i integracją usług przetwarzania danych
• Znajomość Azure Networking, w tym konfiguracji sieci, komunikacji między usługami i zasad bezpiecznej łączności
• Doświadczenie w obszarze Azure Identity, zarządzania tożsamością, uprawnieniami i dostępem do zasobów
• Znajomość mechanizmów Azure Security i dobrych praktyk zabezpieczania infrastruktury oraz danych
• Doświadczenie z Azure Monitoring, w tym monitorowaniem zasobów, analizą logów i konfiguracją alertów
• Umiejętność automatyzacji konfiguracji i wdrażania zmian w środowiskach chmurowych
• Dobre rozumienie architektury platform danych oraz zależności między komponentami
• Umiejętność diagnozowania problemów związanych z wydajnością, dostępnością i bezpieczeństwem infrastruktury
• Bardzo dobra znajomość języka angielskiego

Nice to have:

• Doświadczenie z Azure DevOps lub GitHub Actions
• Znajomość procesów CI/CD dla infrastruktury i platform danych
• Doświadczenie z Azure Key Vault oraz Private Endpoints
• Znajomość Microsoft Entra ID i zarządzania dostępem w rozbudowanych środowiskach chmurowych
• Doświadczenie w optymalizacji kosztów infrastruktury Azure
• Znajomość Python lub SQL
• Doświadczenie w projektowaniu architektury Lakehouse

• Projektowanie, rozwój i utrzymanie infrastruktury chmurowej wspierającej platformę danych
• Tworzenie i automatyzacja konfiguracji środowisk do przechowywania i przetwarzania danych
• Rozwój architektury do efektywnego zarządzania dużymi zbiorami danych
• Konfiguracja i optymalizacja usług integracji, przetwarzania oraz udostępniania danych
• Projektowanie mechanizmów zapewniających bezpieczną komunikację między komponentami platformy
• Zarządzanie dostępem do zasobów i wdrażanie zasad bezpieczeństwa infrastruktury chmurowej
• Rozwijanie mechanizmów monitorowania dostępności, wydajności i stabilności środowiska
• Automatyzacja procesów wdrażania zmian infrastrukturalnych i utrzymanie spójności konfiguracji
• Identyfikowanie problemów technicznych i optymalizacja wykorzystania zasobów chmurowych
• Współpraca z zespołami Data Engineering i Cloud Engineering przy rozwoju platformy danych
• Przygotowywanie dokumentacji technicznej i współtworzenie standardów zarządzania infrastrukturą