BI Data Engineer – ETL / Data Warehouse / Lakehouse
Tech Stack / Keywords
Firma i stanowisko
Dla jednego z naszych klientów szukamy BI Data Engineera, który będzie odpowiedzialny za projektowanie i rozwój procesów ETL/ELT, hurtowni danych, architektury Data Lakehouse oraz rozwiązań BI. To rola łącząca Data Engineering, Business Intelligence, Data Warehousing i Data Governance.
Wymagania
- Master's degree + minimum 5 lat doświadczenia zawodowego, lub
- Bachelor's degree + minimum 7 lat doświadczenia, lub
- Wykształcenie średnie + minimum 12 lat doświadczenia.
- Praktyczne doświadczenie w projektowaniu i implementacji procesów ETL/ELT.
- Doświadczenie w dimensional modelling i projektowaniu hurtowni danych.
- Doświadczenie z architekturą Data Lakehouse.
- Doświadczenie w obszarze data governance i data lineage.
- Znajomość wymagań GDPR w kontekście platform danych i raportowania.
- Bardzo dobra znajomość języka angielskiego – minimum poziom B2.
- Umiejętność pracy z zespołami technicznymi i interesariuszami biznesowymi.
- Analityczne, uporządkowane i szczegółowe podejście do pracy.
Mile widziane:
- Microsoft Data Analyst Associate
- Azure Data Engineer Associate
- Amazon Certified Data Analytics – Specialty
Obowiązki
- Projektowanie i implementacja end-to-end procesów ETL/ELT oraz workflowów orkiestracji.
- Implementacja data contracts oraz zarządzanie ewolucją schematów danych.
- Projektowanie i utrzymanie Enterprise Data Warehouses, Data Lakes i Data Lakehouses.
- Budowanie i rozwój rozwiązań Business Intelligence.
- Implementacja mechanizmów data quality oraz monitorowania kondycji danych.
- Praca z data observability, w tym data lineage i freshness, oraz definiowanie i monitorowanie SLA/SLO.
- Optymalizacja kosztów i wydajności platform BI oraz hurtowni danych poprzez partitioning, caching, clustering, query optimisation i resource scaling.
- Zbieranie i analiza wymagań biznesowych dotyczących pipeline'ów, storage'u i raportowania.
- Wspieranie self-service BI poprzez przygotowywanie curated datasets, certified reports oraz wsparcie i szkolenia użytkowników.
- Projektowanie nowoczesnych architektur BI dla środowisk cloud, on-premises i hybrid.
- Implementacja warstw data virtualisation, zapewniających zunifikowany dostęp do heterogenicznych źródeł danych.
- Projektowanie i rozwój aplikacji raportowych i analitycznych – dashboardów, KPI oraz narzędzi self-service BI.
- Projektowanie modeli danych, w tym dimensional models, zgodnie z wymaganiami biznesowymi.
- Projektowanie i optymalizacja fizycznych schematów baz danych poprzez indexing, partitioning i odpowiednie strategie storage.
- Analiza wydajności, query tuning i optymalizacja zasobów.
- Projektowanie i realizacja testów dla rozwiązań BI, w tym data validation, regression testing, contract testing, oraz automated pipelines zintegrowanych z CI/CD.
- Deployment i konfiguracja systemów BI z wykorzystaniem infrastructure-as-code, version control oraz environment management.
Data Governance & Security:
- Zarządzanie warstwą semantyczną BI – KPIs, metrics catalog, naming conventions, row-level security.
- Zarządzanie dostępami oraz bezpieczeństwem danych zgodnie z GDPR i wewnętrznymi politykami ochrony danych.
- Egzekwowanie zasad data lineage i data stewardship.
- Utrzymywanie dokumentacji technicznej, m.in. data dictionaries, lineage, design specifications i runbooks.
Inne informacje
Informujemy, że administratorem danych jest Upvanta sp. z o.o z siedzibą w Warszawie, ul. Prosta 70. Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
Upvanta
291 aktywnych ofert