Data Engineer

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom. Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

• Minimum 5 lat doświadczenia w podobnej roli
• Doświadczenie w projektowaniu i implementacji procesów ETL/ELT oraz przetwarzaniu danych wsadowych lub strumieniowych
• Bardzo dobra znajomość SQL
• Bardzo dobra znajomość przynajmniej jednego języka programowania/skryptowego, np. Python
• Znajomość hurtowni danych, data lake/lakehouse, orkiestracji procesów i monitoringu przetwarzania
• Doświadczenie w optymalizacji zapytań, obsłudze dużych wolumenów danych i zapewnianiu jakości danych
• Umiejętności w zakresie repozytorium kodu, przeprowadzania code review i realizacji testów
• Umiejętność tworzenia dokumentacji technicznej

Nice to have:

• Doświadczenie z platformami chmurowymi oraz narzędziami CI/CD dla rozwiązań danych

• Udział w projekcie z obszaru bankowości
• Projektowanie, budowa i utrzymanie przepływów danych oraz procesów ETL/ELT
• Implementacja transformacji, walidacji, reguł jakości danych i mechanizmów kontroli błędów
• Integracja danych z systemów źródłowych do docelowych struktur analitycznych
• Optymalizacja wydajności zapytań i procesów przetwarzania danych
• Przygotowanie testów technicznych, dokumentacji oraz wsparcie wdrożenia zmian
• Współpraca z analitykiem danych, data modelerem, architektem i zespołami utrzymaniowymi
• Tryb realizacji usług: hybrydowy, obejmujący obecność w biurze w Warszawie, 2 dni w tygodniu