BlueSoft

Senior Data Engineer

Brak informacji o wynagrodzeniu

SeniorZdalnie·WarszawaInne·B2B

#456649·Dodano 21 dni temu·2

Źródło: justjoin.it

Aplikuj teraz

Tech Stack / Keywords

PostgreSQL Airflow Python Kafka SQL Apache SparkApache BeamBigQuery

Podsumowanie oferty

The Senior Data Engineer will design, develop, and maintain high-performance data processing solutions handling large volumes of data in near real-time for an enterprise financial data platform. The role involves ensuring high availability, scalability, and performance while integrating with communication systems including RabbitMQ. The engineer will work with a platform processing millions of messages per day with data refresh intervals as low as one second.

Wymagania

Several years of experience with PostgreSQL and excellent knowledge of SQL.
Practical knowledge of PL/pgSQL including procedures, functions, and triggers.
Experience in relational data modeling, normalization, and denormalization.
Experience working with large data volumes and high availability systems.
Skills in optimizing SQL queries, ETL processes, and database performance.
Ability to analyze execution plans, tune indexes, and monitor PostgreSQL.
Knowledge of Linux.
Technical or scientific higher education.
English language skills at minimum B2 level.

Nice to have:

Python for data automation and processing.
Knowledge of Kafka or RabbitMQ for message and data stream processing.
Experience with Apache Airflow for data process orchestration; also familiarity with Apache Spark or Apache Beam.
Experience with CI/CD.
Experience in the banking or financial sector.
Knowledge of Big Data technologies.
Familiarity with GCP, Rust, BigQuery, and OCR tools.

Obowiązki

Design, development, and maintenance of high-performance data solutions processing millions of messages daily with near real-time refresh (every second).
Architecting scalable, high-availability data architectures.
Integration with communication systems such as RabbitMQ.
Optimizing ETL and data processing workflows.
Working with data modeling including relational, normalization, and denormalization.
Performance tuning and monitoring of PostgreSQL databases including query optimization, index tuning, and execution plan analysis.
Handling data archiving with a two-year retention period.

Benefity

Collaboration with an interdisciplinary team of technology enthusiasts.
Long-term project engagement at a company with over 20 years in IT.
Participation in diverse IT projects for recognized industry leaders.
Access to the latest technologies and engineering standards.
Flexible service delivery – hybrid or fully remote, arranged individually by teams.
Ecosystem for knowledge exchange and development: internal trainings, thematic guilds, cloud certification training with partnerships with four cloud providers.
Access to online English or German language learning and group language classes.
Opportunity to join Multisport and private medical care on preferential terms negotiated by BlueSoft.
Sponsored sea voyages in the Caribbean, Mediterranean, and Northern seas.

Elastyczne godziny

Szkolenia wewnętrzne

Budżet konferencyjny

Kursy językowe

Karta sportowa

Opieka zdrowotna

Inne informacje

"Administratorem danych jest BlueSoft Sp. z o.o., Aleje Jerozolimskie 134, 02-305 Warszawa. Dane zbierane i przetwarzane są w celach związanych z prowadzeniem procesów rekrutacyjnych. Każdy kandydat ma prawo dostępu do treści swoich danych, ich poprawiania lub usuwania. Wniosek o poprawienie lub usunięcie danych powinno być wystosowane na adres: [email protected] Podanie wszystkich danych osobowych jest dobrowolne, jednak wyrażenie zgody na ich przetwarzanie jest niezbędne, aby wziąć udział w prowadzonych procesach rekrutacyjnych”. Warunkiem wzięcia udziału w rekrutacji jest dodanie do przesyłanych dokumentów aplikacyjnych następującej klauzuli: „Wyrażam zgodę na przetwarzanie przez BlueSoft Sp. z o.o., Aleje Jerozolimskie 134, 02-305 Warszawa, moich danych osobowych zawartych w dokumentach aplikacyjnych dla potrzeb prowadzenia procesów rekrutacyjnych"

BlueSoft

71 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz