Senior Data Engineer
Tech Stack / Keywords
Firma i stanowisko
emagine Polska is hiring a Senior Data Engineer to work within their Sustainability Data & AI team. The project involves developing and operating a modern Sustainability Data Foundation based on Databricks. The role supports sustainability reporting, regulatory compliance, and analytics.
Wymagania
- 5+ years of experience in data engineering and data platforms
- Strong production experience with Databricks
- Expert knowledge of PySpark, SQL, data modelling and data pipeline design
- Experience with CI/CD, Git, automated testing and deployment
- Knowledge of data quality, governance, lineage and auditing
- Strong troubleshooting and root-cause analysis skills
- Ability to take ownership and deliver pragmatic, production-ready solutions
Nice to have:
- Experience with ESG / sustainability or regulatory reporting
- Knowledge of ERP, procurement, finance or supplier data
- Experience building Databricks applications, dashboards or user-facing tools
Obowiązki
- Design and develop data pipelines and data products using Databricks, Delta Lake and PySpark
- Build data models and transformation frameworks for large and complex datasets
- Develop data quality controls, validation and reconciliation processes
- Optimize pipelines for performance, scalability and cost
- Implement CI/CD, automated testing and deployment processes
- Support data governance, lineage, security and access management
- Work closely with Sustainability, Business, Product and Reporting teams
- Troubleshoot issues, perform root-cause analysis and ensure reliable production delivery
- Develop Databricks-based tools to simplify data access and reporting
Inne informacje
Informujemy, że administratorem danych jest emagine z siedzibą w Warszawie, ul.Domaniewskiej 39A (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
emagine
887 aktywnych ofert