Senior Data Engineer (Integrations / Data Platform)

Brak informacji o wynagrodzeniu
SeniorFull-time·B2B
#379026·Dodano dziś·0
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

ScalaBig DataData EngineeringSparkGCPAILLM

Firma i stanowisko

Sigma Software partners with innovative companies to deliver cutting-edge technology solutions. The role involves designing and operating a canonical data platform that integrates diverse external data sources, ensuring high quality and flexibility. The client is a fast-growing AdTech company focused on digital advertising and data-driven marketing, building highly resilient and scalable systems that encourage experimentation and innovation.

Wymagania

  • At least 5 years of experience as a Data Engineer or Backend/Data Engineer
  • Strong production experience with Java or Scala
  • Proven experience integrating external systems via REST APIs (pagination, rate limiting, token-based authentication)
  • Strong data modelling skills with structured, relational data
  • Solid SQL knowledge
  • Experience with GCP Dataflow
  • Experience operating data pipelines in production environments
  • Strong communication skills and ability to collaborate across teams
  • At least an Upper Intermediate level of English

Nice to have:

  • Experience with event-driven architectures or messaging systems
  • Designing canonical schemas across multiple data sources
  • Experience with LLM (Large Language Models)

Obowiązki

  • Design, build, and maintain reliable data pipelines to ingest and process data from external systems
  • Implement integrations using Java or Scala, ensuring scalability and resilience
  • Handle both full data loads and incremental updates efficiently
  • Collaborate with engineering and product teams to align on integration and data needs
  • Develop and maintain a unified internal data model
  • Ensure data quality, detect and resolve incorrect or incomplete data
  • Utilize AI-assisted tools to improve data quality and operational efficiency
  • Monitor and optimize data pipelines for production readiness

Inne informacje

Informujemy, że administratorem danych jest Sigma Software sp. z o.o. z siedzibą w Warszawie, ul. Chmielna 134 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.

Sigma Software

Sigma Software

20 aktywnych ofert

Zobacz wszystkie oferty
Aplikuj teraz