Senior Data Engineer (F/M)
Tech Stack / Keywords
Firma i stanowisko
Założona w 1988 roku we Francji Grupa Astek jest światowym partnerem w obszarze doradztwa inżynieryjnego oraz IT. Dzięki swojej wiedzy specjalistycznej w wielu sektorach przemysłowych i technologicznych, Astek wspiera międzynarodowych Klientów w rozwijaniu i wdrażaniu produktów oraz usług, jednocześnie uczestnicząc w ich transformacji cyfrowej.
Grupa Astek od momentu powstania opiera swój rozwój na kulturze przedsiębiorczości i innowacyjności oraz na budowaniu umiejętności swoich ponad 10 000 pracowników, którzy codziennie uczestniczą w zróżnicowanych projektach technologicznych i inżynieryjnych.
Dołącz do silnie rozwijającej się we Francji i na całym świecie Grupy, której obroty w 2024 r. wyniosły 705 milionów euro.
Wymagania
- Doświadczenie w Pythonie - minimum 7 lat
- Doświadczenie w Linux - minimum 5 lat
- Doświadczenie z rozproszonymi silnikami przetwarzania danych, takimi jak Spark
- Doświadczenie z Hadoop i (Hive, Oozie, MapReduce itp.)
- Dobra/zaawansowana znajomość SQL
- Doświadczenie w tworzeniu przepływów danych
- Ekspert BitBucket i GIT
- Doświadczenie w testach jednostkowych (testowanie Junit 5, Mockito, Spark)
- Zaawansowana znajomość języka angielskiego
Obowiązki
- Budowa rozproszonego i wysoce zrównoleglanego potoku przetwarzania dużych zbiorów danych, który przetwarza ogromne ilości danych (zarówno ustrukturyzowanych, jak i nieustrukturyzowanych) w czasie zbliżonym do rzeczywistego.
- Wykorzystanie Spark i Scala do transformacji danych korporacyjnych w celu umożliwienia tworzenia produktów opartych na danych.
- Ciągłe dostarczanie na Hadoop i inne platformy Big Data.
- Automatyzacja procesów tam, gdzie to możliwe, powtarzalność i niezawodność.
Oferta
- Długoterminowa współpraca
- Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
- Mentoring Competence Center - bycie członkiem społeczności CC od pierwszego dnia pracy jest szansą na rozwijanie swoich umiejętności, uczestniczenie w różnych konferencjach oraz dzielenie się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
- Jasna ścieżka kariery
- Pakiet benefitów pracowniczych (Multisport, prywatna opieka medyczna, ubezpieczenie na życie)
- Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe
Inne informacje
Praca w modelu hybrydowym : 3 dni z biura w Warszawie lub w Trójmieście
ASTEK Polska
253 aktywne oferty