Senior Data Engineer

Devire Outsourcing IT to forma współpracy dedykowana dla specjalistów z branży IT, oparta na zasadach własnej działalności gospodarczej - B2B, realizująca projekty dla wiodących Klientów prowadzących innowacyjne i nowoczesne projekty. Dla jednego z największych banków w Polsce poszukujemy Senior Data Engineera.

• Doświadczenie w projektowaniu i budowie nowoczesnych hurtowni danych.
• Praktyczna wiedza z zakresu budowy pipeline'ów ETL/ELT.
• Ekspercka znajomość relacyjnych baz danych Oracle i PostgreSQL, obejmująca projektowanie, budowę oraz tuning baz danych.
• Doświadczenie w pracy z Google BigQuery.
• Znajomość narzędzia Informatica PowerCenter.
• Doświadczenie z technologiami architektury sterowanej zdarzeniami (Kafka, Pub/Sub).
• Zaawansowana znajomość systemu Linux.

Nice to have:

• Znajomość Python.
• Znajomość AirFlow.
• Znajomość Apache Spark.
• Znajomość AutomatenNow.
• Znajomość Rust2.

• Projektowanie, budowa i rozwój rozwiązań klasy Data Lake oraz Data Warehouse.
• Projektowanie i realizacja rozwiązań informatycznych w obszarze integracji oraz zasilania danych.
• Analiza danych oraz opracowywanie modeli logicznych i fizycznych.
• Optymalizacja i tuning zapytań SQL dla relacyjnych baz danych oraz hurtowni danych w środowiskach on-premise i Google Cloud Platform (GCP).
• Projektowanie i implementacja procesów przetwarzania danych on-line i off-line z wykorzystaniem narzędzi on-premise oraz GCP.
• Tworzenie rozwiązań do ładowania danych strukturalnych i niestrukturalnych z wykorzystaniem języków Python oraz Rust.
• Projektowanie i rozwój tematycznych Data Martów na relacyjnych i kolumnowych bazach danych.
• Opracowywanie koncepcji oraz implementacja rozwiązań zgodnie z wymaganiami biznesowymi.
• Analiza, diagnozowanie i usuwanie incydentów oraz udział w rozwiązywaniu problemów produkcyjnych.
• Wsparcie procesu testowania oraz wdrażania zmian w obszarze procesów zasilania danych.
• Utrzymanie i serwisowanie wdrożonych rozwiązań oraz wsparcie ich dalszego rozwoju.
• Praca zgodnie z metodyką DevSecOps.