Senior Data Engineer

Szukamy Senior Data Engineera, który dołączy do projektu z obszaru nowoczesnych platform danych, AI oraz inteligentnego zarządzania łańcuchem dostaw.

• 5–8 lat doświadczenia w obszarze Data Engineering
• Bardzo dobra znajomość Python i SQL
• Praktyczne doświadczenie z Apache Spark i przetwarzaniem danych na dużą skalę
• Znajomość Apache Kafka oraz Apache Airflow
• Doświadczenie z architekturą Data Lakehouse (np. Delta Lake, Iceberg, Hudi, Databricks lub podobne)
• Umiejętność projektowania modeli danych i budowania pipeline’ów end-to-end
• Doświadczenie z relacyjnymi bazami danych, np. PostgreSQL
• Znajomość baz wektorowych, np. Weaviate, Milvus lub podobnych
• Doświadczenie w rozwiązaniach AI/ML, GenAI oraz RAG
• Znajomość Docker i Kubernetes
• Doświadczenie z CI/CD w środowiskach danych
• Praktyczna wiedza z zakresu Data Governance, Data Lineage, Data Quality oraz kontroli dostępu

Nice to have:

• Doświadczenie z SAP S/4HANA lub SAP Ariba
• Praca ze środowiskami on-premise i air-gapped
• Znajomość Trino / Presto
• Doświadczenie z dbt lub podobnymi narzędziami Analytics Engineering
• Znajomość Flink lub Spark Structured Streaming
• Doświadczenie w branży defense, aerospace, manufacturing lub supply chain
• Doświadczenie w pracy z danymi wrażliwymi i środowiskami o wysokich wymaganiach bezpieczeństwa

• Projektowanie i rozwój architektury Data Lakehouse
• Budowa skalowalnych, end-to-end pipeline’ów danych
• Przetwarzanie dużych zbiorów danych z wykorzystaniem Apache Spark
• Integracja danych z systemów ERP, źródeł zewnętrznych oraz dokumentacji technicznej
• Projektowanie modeli danych i rozwiązań wspierających analitykę oraz AI
• Rozwój rozwiązań dla AI/ML, GenAI i RAG
• Praca z danymi strumieniowymi i batchowymi
• Dbanie o jakość, bezpieczeństwo, lineage i governance danych
• Współpraca przy rozwoju i utrzymaniu platformy danych oraz procesów CI/CD

Informujemy, że administratorem danych jest co.brick Sp. z o.o. z siedzibą w Gliwicach, ul. Kaczyniec 9 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.