Senior Data Engineer (Databricks)
Tech Stack / Keywords
Firma i stanowisko
Maintenance and development of financial applications within the financial domain.
Wymagania
Mandatory:
- Strong commercial experience as a Data Engineer, preferably in a complex enterprise environment.
- Strong hands-on experience with Databricks.
- Very good Python programming skills.
- Strong experience with Azure Data Factory (ADF).
- Experience with Azure Logic Apps and Azure Functions.
- Advanced SQL skills, including query performance analysis and SQL optimization.
- Experience working with and maintaining production data solutions.
- Ability to troubleshoot complex technical issues and work independently.
- Good communication and collaboration skills.
Should Have:
- Experience with Git repository management, including branching, pull requests, code reviews, and version control best practices.
- Experience working in structured development environments with CI/CD processes.
Nice to Have:
- Experience with SSIS (SQL Server Integration Services) and traditional ETL development.
- Previous experience working with financial applications or financial data.
- Experience maintaining and modernizing existing data/ETL solutions.
Obowiązki
- Develop, maintain, and optimize data solutions supporting financial applications.
- Work extensively with Databricks to develop and maintain data processing and engineering solutions.
- Develop and maintain data pipelines and integrations using Python.
- Design, develop, and maintain Azure-based solutions using:
- Azure Data Factory (ADF)
- Azure Logic Apps
- Azure Functions
- Write complex SQL queries and perform SQL optimization to ensure high performance and scalability.
- Analyze and troubleshoot existing data processes, identify performance bottlenecks, and implement improvements.
- Support the maintenance and continuous development of existing financial applications.
- Collaborate with other engineers, developers, analysts, and business stakeholders to deliver reliable data solutions.
- Manage and maintain source code using Git repositories.
- Contribute to technical documentation, code reviews, and development best practices.
- Troubleshoot production issues and support the stability and reliability of data solutions.
Inne informacje
Informujemy, że administratorem danych jest ManpowerGroup S.A. z siedzibą w Warszawie, ul. Prosta 68 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
Experis
334 aktywne oferty