Senior Data Engineer

• Several years of experience in Data Engineering and designing data products or data warehouse solutions.
• Strong expertise in Python and SQL.
• Expert knowledge of Apache Spark, Databricks and modern data processing architectures.
• Strong experience with Azure data services, including Azure Data Factory and Delta Lake.
• Good understanding of data modelling, ETL/ELT processes and data architecture.
• Strong understanding of Azure technology choices, costs and trade-offs.
• Experience with API development and integration is a plus.
• Knowledge of Master Data Management (MDM) is a plus.
• Strong communication and collaboration skills with both technical and business stakeholders.

• Design, develop and maintain data ingestion, integration and processing solutions.
• Build and maintain data products, data warehouse solutions and ETL/ELT processes.
• Develop scalable data solutions using Azure, Databricks, Apache Spark, Azure Data Factory and Delta Lake.
• Make technical and architectural decisions in collaboration with Product Owners and Architects.
• Ensure data quality, security, performance and solution stability.
• Collaborate with stakeholders, Data Stewards, architects and IT teams.
• Develop automated testing, CI/CD pipelines and deployment processes.
• Promote best practices and modern approaches to data engineering.

Informujemy, że administratorem danych jest Avenga z siedzibą w Gdańsku, Biurowiec Officyna, Aleja Grunwaldzka 48/50 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Rocket Jobs oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.