Senior Data Engineer

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom.

Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

• Doświadczenie w projektowaniu i budowie nowoczesnych hurtowni danych
• Doświadczenie w budowie pipeline’ów ETL/ELT
• Bardzo dobra znajomość relacyjnych baz danych Oracle oraz PostgreSQL (projektowanie, budowa i tuning)
• Znajomość Google BigQuery
• Doświadczenie z Informatica PowerCenter
• Znajomość technologii wykorzystywanych w architekturze event-driven, takich jak Kafka, Pub/Sub
• Swobodne posługiwanie się środowiskiem Linux
• Praca w Pythonie

Nice to have:

• Doświadczenie z Apache Airflow, Rust, Apache Spark

• Uczestnictwo w projekcie budowy i rozwoju platformy danych (Data Lake / Data Warehouse) z wykorzystaniem wymienionych technologii
• Praca w zespole data / data platform odpowiedzialnym za rozwój i utrzymanie procesów zasilania danych oraz architektury przetwarzania danych
• Projektowanie i rozwój pipeline’ów ETL/ELT
• Budowa i rozwój hurtowni danych oraz Data Lake
• Analiza danych, modelowanie logiczne i fizyczne
• Optymalizacja zapytań SQL
• Tworzenie procesów przetwarzania danych on-line i off-line
• Wsparcie testów oraz wdrożeń
• Rozwiązywanie incydentów i problemów produkcyjnych