Data Engineer

15k - 20k PLN15 000 - 20 000 PLN/ mies./ mies.B2BB2B (netto)

MidZdalnie·WarszawaFull-time·B2B

#465372·Dodano dziś·3

Źródło: SOLID.Jobs

Aplikuj szybko

Tech Stack / Keywords

Python SQL Apache KafkaApache FlinkSpark Structured StreamingKafka ConnectGit CI/CD Airflow PostgreSQL

Podsumowanie oferty

Jako Data Engineer będziesz projektować i rozwijać platformy oraz procesy przetwarzania danych w czasie rzeczywistym i wsadowo. Praca obejmuje budowę architektury event streaming oraz pipeline’ów danych dla klientów z obszarów Energy, Utilities i Manufacturing, z wykorzystaniem m.in. Python, SQL i Apache Kafka.

Wymagania

Minimum 3 lata doświadczenia jako Data Engineer lub na podobnym stanowisku.
Bardzo dobra znajomość Python i SQL.
Doświadczenie w projektowaniu i budowie pipeline’ów danych, w szczególności przetwarzania danych strumieniowych i eventowych.
Znajomość architektury event-driven oraz narzędzi do przetwarzania danych w czasie rzeczywistym, np. Apache Kafka, Kafka Connect, Apache Flink, Spark Structured Streaming, Apache Pulsar, Azure Event Hubs lub Google Pub/Sub.
Znajomość relacyjnych baz danych oraz technologii wykorzystywanych do budowy nowoczesnych platform danych.
Doświadczenie w pracy z Git oraz CI/CD.
Doświadczenie z wybranymi technologiami z obszarów: Apache Kafka, Spark, Flink, Trino, Hive; Azure, AWS, Google Cloud; Airflow, NiFi; S3-compatible Object Storage, Azure Storage, GCS; Iceberg, Delta Lake; PostgreSQL, TimescaleDB, SQL Server.
Umiejętność monitorowania jakości danych oraz diagnozowania problemów wydajnościowych.
Gotowość do współpracy z klientem i rozumienie potrzeb biznesowych.
Komunikatywność oraz znajomość języka angielskiego umożliwiająca codzienną pracę.

Mile widziane:

Znajomość języka niemieckiego.

Obowiązki

Projektowanie, implementacja i rozwój platform oraz procesów do przetwarzania danych w czasie rzeczywistym i wsadowo.
Budowa i rozwój architektury opartej o event streaming oraz integrację systemów wymieniających dane w czasie rzeczywistym.
Tworzenie i optymalizacja pipeline’ów danych oraz modeli danych dla systemów analitycznych i operacyjnych.
Projektowanie niezawodnych, skalowalnych rozwiązań we współpracy z zespołem DevOps.
Wsparcie klientów z obszaru Energy, Utilities i Manufacturing w budowie nowoczesnych platform danych.

Benefity

Elastyczne godziny pracy.
Szkolenia wewnętrzne.
Klasy językowe.
Pakiet medyczny.
Ubezpieczenie.
Pakiet sportowy.
Kawa i herbata.
Parking.
Płatny „urlop” dla osób pracujących w formule B2B.

Szkolenia wewnętrzne

Kursy językowe

Opieka zdrowotna

Ubezpieczenie

Karta sportowa

Napoje w biurze

Parking dla aut

Płatny urlop

ConnectPoint

5 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj szybko