Data Platform Engineer (Azure & Databricks)

Nasz Klient to międzynarodowa organizacja rozwijająca nowoczesne rozwiązania technologiczne wspierające zarządzanie, przetwarzanie i wykorzystanie danych. Projekt koncentruje się na rozwoju oraz utrzymaniu platformy danych opartej na usługach Microsoft Azure.

• Minimum 4 lata komercyjnego doświadczenia w Data Platform Engineering, Cloud Engineering lub pokrewnym obszarze
• Bardzo dobra znajomość Microsoft Azure w projektowaniu i utrzymywaniu infrastruktury chmurowej
• Praktyczne doświadczenie z Azure Databricks i konfiguracją środowisk przetwarzania danych
• Doświadczenie z Terraform i zarządzaniem infrastrukturą jako kodem (Infrastructure as Code)
• Znajomość Azure Data Lake i architektury przechowywania danych w chmurze
• Doświadczenie z Azure Data Factory i integracją usług przetwarzania danych
• Znajomość Azure Networking, w tym konfiguracji sieci i zabezpieczeń komunikacji
• Doświadczenie z Azure Identity w zarządzaniu tożsamością i dostępem
• Znajomość mechanizmów Azure Security oraz dobrych praktyk zabezpieczania infrastruktury i danych
• Doświadczenie z Azure Monitoring, monitorowaniem zasobów i konfiguracją alertów
• Umiejętność automatyzacji konfiguracji i wdrażania zmian środowisk chmurowych
• Dobre rozumienie architektury platform danych i powiązań między komponentami
• Umiejętność diagnozowania problemów związanych z wydajnością, dostępnością i bezpieczeństwem
• Bardzo dobra znajomość języka angielskiego

Nice to have:

• Doświadczenie z Azure DevOps lub GitHub Actions
• Znajomość procesów CI/CD dla infrastruktury i platform danych
• Doświadczenie z Azure Key Vault oraz Private Endpoints
• Znajomość Microsoft Entra ID i zarządzania dostępem w rozbudowanych środowiskach
• Doświadczenie w optymalizacji kosztów infrastruktury Azure
• Znajomość Python lub SQL
• Doświadczenie w projektowaniu architektury Lakehouse

• Projektowanie, rozwój i utrzymanie infrastruktury chmurowej wspierającej platformę danych
• Tworzenie i automatyzacja konfiguracji środowisk do przechowywania i przetwarzania danych
• Rozwijanie architektury umożliwiającej efektywne zarządzanie dużymi zbiorami danych
• Konfiguracja i optymalizacja usług integrujących, przetwarzających i udostępniających dane
• Projektowanie mechanizmów zapewniających bezpieczną komunikację między komponentami platformy
• Zarządzanie dostępem do zasobów oraz wdrażanie zasad bezpieczeństwa infrastruktury chmurowej
• Rozwijanie mechanizmów monitorowania dostępności, wydajności i stabilności środowiska
• Automatyzacja procesów wdrażania zmian infrastrukturalnych oraz utrzymanie spójności konfiguracji
• Identyfikacja problemów technicznych i optymalizacja wykorzystania zasobów chmurowych
• Współpraca z zespołami Data Engineering i Cloud Engineering przy rozwoju platformy danych
• Przygotowywanie dokumentacji technicznej oraz współtworzenie standardów zarządzania infrastrukturą

By applying, you acknowledge that your personal data will be processed by TQLO sp. z o.o. with its registered office in Warsaw (hereinafter: the “Controller”) for the purpose of conducting the recruitment process.

The legal basis for processing your personal data is: – taking steps prior to entering into a contract and fulfilling legal obligations under applicable law (Art. 6(1)(b) and (c) GDPR), – your consent, in case of providing additional data beyond the scope required by law or consenting to participation in future recruitment processes (Art. 6(1)(a) GDPR).

Providing personal data within the scope resulting from the Polish Labour Code is necessary to participate in the recruitment process. Providing additional data is voluntary.

Your personal data may be shared with entities cooperating with the Controller in the recruitment process, including IT system providers and potential clients for whom recruitment processes are conducted.

Personal data will be processed for the duration of the recruitment process and for the period necessary to establish, exercise or defend legal claims. In the case of consent for future recruitment processes, data will be processed until the consent is withdrawn.

You have the right to access your personal data, rectify it, erase it, restrict processing, object to processing, request data portability, and lodge a complaint with a supervisory authority.

You may withdraw your consent at any time without affecting the lawfulness of processing carried out prior to its withdrawal.