Data Engineer AWS

RITS Group to firma informatyczna oferująca usługi programistyczne dla rynku polskiego i międzynarodowego. Klientem jest firma z sektora media & broadcasting realizująca zaawansowane projekty związane z przetwarzaniem danych na dużą skalę w środowisku chmurowym.

• Minimum kilkuletnie doświadczenie na stanowisku Senior Data Engineer
• Bardzo dobra znajomość PySpark oraz SQL
• Doświadczenie z AWS CDK, AWS Lambda, Databricks, Dataproc, Airflow, Terraform
• Praktyczna wiedza z zakresu Data Quality, Unit Testing oraz Integration Testing
• Doświadczenie z narzędziami CI/CD: GitHub Actions oraz/lub Jenkins
• Umiejętność pracy w zespołach rozproszonych i projektach międzynarodowych
• Język angielski na poziomie min. B2+

• Projektowanie, rozwój i utrzymanie rozwiązań Data Engineering w środowiskach chmurowych
• Budowa i optymalizacja procesów ETL/ELT oraz pipeline’ów danych
• Praca z dużymi wolumenami danych z naciskiem na Data Quality
• Implementacja i rozwój rozwiązań opartych o PySpark i SQL
• Tworzenie oraz utrzymanie testów jednostkowych i integracyjnych
• Automatyzacja procesów CI/CD
• Współpraca z zespołami technicznymi i biznesowymi po stronie klienta
• Udział w międzynarodowym środowisku projektowym