Data Engineer (m/f/n)

110 - 120 PLN/ godz.B2B
MidInne·B2B
#410886·Dodano 8 dni temu·1
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

AWSDBTAmazon RedshiftAmazon S3Apache AirflowSQL

Wymagania

  • Experience with Amazon S3 and Amazon Redshift.
  • Proficient with dbt and Apache Airflow.
  • Advanced SQL skills (Inner, Self, Left, Right, and Full Outer Joins).
  • Knowledge of Data Warehousing concepts.
  • Implementation experience of fact and dimension tables.
  • Understanding of Type 1 & Type 2 Slowly Changing Dimensions.
  • Working knowledge of Kimball Dimensional Modeling.
  • Familiarity with Cloudera, MinIO, and Apache Iceberg.
  • Experience in ELT/Data Pipeline development.

Obowiązki

  • Develop and maintain ELT pipelines from source systems (Cloudera/MinIO) to Amazon S3 and Amazon Redshift.
  • Build and maintain data warehouse layers including Staging, Intermediate, Business View, and Dimensional Models.
  • Implement fact tables (Transactional, Accumulating Snapshot, Periodic Snapshot) and Type 1 & Type 2 Slowly Changing Dimensions according to established data models.
  • Develop data transformations using dbt and orchestrate workflows using Apache Airflow.
  • Write, optimize, and troubleshoot SQL queries including inner, self, and outer joins.
  • Work with Amazon Redshift for data loading, transformation, and performance optimization.
  • Manage and process data stored in Amazon S3 and Apache Iceberg tables on the MinIO platform.
  • Support migration of data pipelines from Cloudera to the MinIO platform.
  • Collaborate with architects, data modelers, and business teams to deliver reliable and high-quality data solutions.

Benefity

  • B2B contract with SHIMI.
  • Rate: 120 zł/h netto + VAT.
  • Remote type of work.
  • Contract end date: 31.12.2027 (optional extension).

Inne informacje

Informujemy, że administratorem danych jest Shimi Sp. z o.o. z siedzibą w Warszawie, (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.

SHIMI sp. z o.o.

SHIMI sp. z o.o.

62 aktywne oferty

Zobacz wszystkie oferty
Aplikuj teraz