Senior Data Engineer

Clurgo to firma stworzona przez developerów dla developerów. Realizuje różnorodne projekty IT dla klientów z wielu branż z dbałością o dobre praktyki programistyczne i work-life balance. Aktualnie poszukuje osoby do międzynarodowego projektu transformacyjnego z wykorzystaniem technologii takich jak Python, SQL, GCP, BigQuery, Airflow, Terraform, dbt, Dataform, GitHub Actions.

• Minimum 5 lat doświadczenia w inżynierii danych
• Ekspercka znajomość Python i SQL
• Doświadczenie w pracy ze środowiskiem chmurowym, preferowany Google Cloud Platform
• Znajomość BigQuery oraz usług Cloud Functions i Dataflow
• Doświadczenie w budowie i rozwoju pipeline’ów danych (ETL/ELT)
• Znajomość narzędzi do orkiestracji procesów, takich jak Airflow (np. Cloud Composer)
• Doświadczenie z Infrastructure as Code (Terraform)
• Znajomość narzędzi do modelowania danych, takich jak dbt lub Dataform
• Doświadczenie z testami integracyjnymi
• Praca z narzędziami CI/CD, w szczególności GitHub Actions
• Umiejętność integracji systemów z wykorzystaniem API
• Komunikacja w języku angielskim

• Projektowanie i rozwój nowoczesnych pipeline’ów danych w środowisku chmurowym
• Automatyzacja integracji danych z systemów płatności i rozliczeń (np. Stripe oraz partnerów billingowych)
• Migracja procesów opartych na plikach CSV i Excel do w pełni zautomatyzowanych rozwiązań wykorzystujących API i hurtownie danych
• Tworzenie zaawansowanych modeli danych w SQL i Python wspierających złożone procesy biznesowe
• Zarządzanie orkiestracją procesów danych z wykorzystaniem Airflow oraz Infrastructure as Code (Terraform)
• Realizacja historycznych backfilli danych oraz walidacja poprawności danych dla wieloletnich zakresów
• Analiza i odwzorowywanie logiki biznesowej z arkuszy Excel do skalowalnych rozwiązań technologicznych
• Ścisła współpraca z zespołami biznesowymi, w szczególności z obszaru Finansów, w celu przekładania wymagań biznesowych na rozwiązania techniczne
• Dbanie o wysoką jakość danych oraz realizację wymagań SLA
• Udział w rotacyjnym wsparciu aplikacyjnym w godzinach biznesowych (8:00–20:00, bez dyżurów 24/7)