Senior Data Engineer/Architekt

• min 6 lat doświadczenia w obszarze Data Engineering
• bardzo dobra znajomość aspektów związanych z budową pipeline-ów zasilających ETL/ELT
• doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake i DWH
• znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takich jak np. Kafka, Pub/Sub
• znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI
• znajomość Google BigQuery
• znajomość Kubernetes (Google Kubernetes Engine i OpenShift)
• znajomość relacyjnych baz danych Oracle i PostgreSQL (projektowanie, budowa i tuning baz danych)
• znajomość Python i/lub Rust
• znajomość Apache AirFlow

Nice to have:

• znajomość koncepcji data mesh, baz wektorowych i grafowych
• znajomość Apache Spark - najlepiej GCP Data Proc, Apache Beam – najlepiej GCP DataFlow, AutomateNow, Informatica Power Center

• budowa rozwiązań klasy Data Lake i DWH (procesy zasilania on-line i off-line)
• projektowanie modeli logicznych i fizycznych danych
• tuning zapytań SQL w środowiskach on-premise oraz w chmurze GCP
• tworzenie przepływów danych w Python i Rust (dane strukturalne i niestrukturalne)
• budowa tematycznych datamartów (relacyjne i kolumnowe)
• praca w modelu DevSecOps: serwisowanie oprogramowania, usuwanie incydentów i wsparcie testów