Data Engineer (GCP) | Senior / Expert

RITS Group to firma informatyczna oferująca usługi programistyczne dla rynku polskiego i międzynarodowego, należąca do najszybciej rozwijających się spółek technologicznych.

• Bardzo dobra znajomość Google Cloud Platform (GCP).
• Bardzo dobra znajomość Python oraz SQL.
• Doświadczenie z BigQuery i Cloud Storage.
• Praktyczna znajomość Apache Airflow lub Cloud Composer.
• Doświadczenie w budowie i utrzymaniu produkcyjnych pipeline'ów danych.
• Znajomość modelowania danych (Data Lake, DWH, Star Schema, Snowflake).
• Doświadczenie z CI/CD oraz orkiestracją pipeline'ów.
• Umiejętność projektowania skalowalnych i łatwych w utrzymaniu rozwiązań.
• Doświadczenie w obszarze jakości danych, testowania i observability.

Nice to have:

• Doświadczenie z PySpark.
• Znajomość ekosystemów Spark i/lub Hadoop.
• Doświadczenie z rozwiązaniami do streamingu danych lub Big Data.
• Doświadczenie w tworzeniu backendów w Pythonie.

• Projektowanie i rozwój skalowalnych pipeline'ów danych w Google Cloud Platform z wykorzystaniem Python i SQL.
• Integracja danych z usług takich jak BigQuery i Cloud Storage.
• Tworzenie i optymalizacja procesów transformacji danych.
• Współpraca z Data Architectami, Data Delivery Leadami oraz Business Analystami przy projektowaniu rozwiązań.
• Projektowanie modeli danych oraz architektury pipeline'ów.
• Orkiestracja procesów z wykorzystaniem Apache Airflow / Cloud Composer.
• Dbanie o jakość rozwiązań poprzez testy, audytowalność, możliwość ponownego uruchamiania procesów oraz modułową architekturę.
• Współtworzenie procesów CI/CD i automatyzacja wdrożeń.
• Rozwój rozwiązań opartych o Data Lake, Data Warehouse oraz modele Star Schema i Snowflake.

Informujemy, że administratorem danych jest Relyon IT Services z siedzibą w Warszawie. Podanie danych obowiązkowych jest wymagane zgodnie z Kodeksem pracy. Dane będą przetwarzane w celu realizacji procesu rekrutacji oraz mogą być przetwarzane na podstawie zgody do udziału w przyszłych rekrutacjach. Zgoda może być wycofana w dowolnym momencie.