Data Engineer

Team Connect to wiodący w Polsce dostawca usług IT w modelu nearshore i offshore. Od 2008 roku z sukcesem tworzymy oraz rozwijamy oprogramowanie dla naszych klientów. Specjalizujemy się w wytwarzaniu oprogramowania w oparciu o metodyki Agile i DevOps - od etapu analizy, przez implementację, aż po dalszy rozwój produktu. Tworzymy aplikacje backendowe, frontendowe oraz mobilne.

• Minimum 3–7+ lat doświadczenia jako Inżynier Danych lub na podobnym stanowisku.
• Udokumentowane doświadczenie w dostarczaniu rozwiązań danych dla sektora Financial Services / Investment Banking.
• Silne doświadczenie w integracji danych, transformacji danych oraz modelowaniu danych.
• Doświadczenie w pracy z platformami danych działającymi w chmurze.
• Znajomość programowania i przetwarzania danych: Python, SQL, PySpark.
• Znajomość platform danych: Databricks (Delta Lake, DLT).
• Znajomość cloud data lakes oraz architektur lakehouse.
• Doświadczenie z chmurą: Azure (ADLS, Data Factory, Synapse lub równoważne usługi).
• Znajomość modelowania danych: Architektura Medallion, modele wymiarowe (dimensional models), Data Vault (mile widziane).
• Umiejętność integracji: REST API, przetwarzanie wsadowe (batch ingestion), przetwarzanie strumieniowe (streaming ingestion).
• Doświadczenie z narzędziami DevOps: Git, pipeline’y CI/CD, Azure DevOps lub podobne.
• Bardzo dobra znajomość jakości danych, optymalizacji wydajności oraz skalowalności rozwiązań.

Zakres obowiązków:

• Projektowanie, rozwój i utrzymanie potoków danych ETL/ELT dla danych ustrukturyzowanych i częściowo ustrukturyzowanych.
• Budowa i optymalizacja rozwiązań typu data lakehouse wspierających analitykę, raportowanie oraz wymagania regulacyjne.
• Implementacja procesów pozyskiwania danych z wielu źródeł (bazy danych, API, pliki, strumienie komunikatów/zdarzeń).
• Wykonywanie transformacji danych, walidacji oraz kontroli jakości w całych przepływach danych (end-to-end).
• Współpraca z Analitykami Biznesowymi oraz interesariuszami w celu przełożenia wymagań biznesowych na rozwiązania danych.
• Wsparcie środowisk produkcyjnych, analiza incydentów oraz udział w optymalizacji wydajności.
• Zapewnienie zgodności z zasadami zarządzania danymi (data governance), bezpieczeństwa oraz standardami regulacyjnymi.

Informujemy, że administratorem danych jest Team Connect z siedzibą w Warszawie, ul. Wołodyjowskiego 58. Podanie danych obowiązkowych jest wymagane na podstawie ustawy Kodeks pracy. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji i mogą być przetwarzane na podstawie zgody w zakresie danych dodatkowych. Zgoda na przetwarzanie danych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty przetwarzające dane w związku z rekrutacją.