Senior Data Engineer

Poszukujemy Senior Data Engineera do zespołu rozwijającego nowoczesne rozwiązania enterprise oraz narzędzia wykorzystujące technologie AI.

• Minimum 5 lat doświadczenia w profesjonalnym software development.
• Bardzo dobre doświadczenie z Apache Spark.
• Praktyczna znajomość Databricks i/lub Azure Synapse / Microsoft Fabric.
• Bardzo dobra znajomość Pythona.
• Doświadczenie z bibliotekami Pandas i/lub Polars.
• Praktyczna znajomość formatu Parquet.
• Doświadczenie z Delta Tables.
• Bardzo dobra znajomość przetwarzania, analizy i transformacji danych.
• Doświadczenie z architekturą mikroserwisową.
• Umiejętność pracy w międzynarodowym i cross-funkcyjnym zespole.
• Znajomość języka angielskiego na poziomie Intermediate+.

Nice to have:

• Doświadczenie z usługami Azure Cloud, takimi jak Service Bus, Data Lake, Blob Storage, Redis.
• Znajomość FastAPI.
• Doświadczenie z Docker.
• Znajomość Kubernetes.

• Projektowanie, rozwijanie i utrzymywanie skalowalnych aplikacji opartych na Apache Spark.
• Tworzenie rozwiązań do przetwarzania, analizy i transformacji dużych zbiorów danych.
• Optymalizacja wydajności procesów i aplikacji data engineeringowych.
• Definiowanie i egzekwowanie standardów kodowania oraz dobrych praktyk inżynierskich.
• Aktywny udział w code review.
• Współpraca z cross-funkcyjnymi zespołami projektowymi.
• Tworzenie i utrzymywanie dokumentacji technicznej.
• Dbanie o jakość, skalowalność i łatwość utrzymania rozwijanych rozwiązań.

Informujemy, że administratorem danych jest Dawid Wierciak Flow to Grow, z siedzibą w Krakowie, ul. os. 2 Pułku Lotniczego 1H lok. 29 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.