Senior Data Engineer / Tech Lead – Databricks & FastAPI

Long-term project with a major international Swiss investment bank in the Banking, Financial Services, and Insurance (BFSI) domain.

• Strong experience in Data Engineering and Python development.
• Hands-on expertise in FastAPI, including API development and enhancements.
• Extensive knowledge of Databricks, PySpark, SQL, and Delta Lake.
• Experience with Unity Catalog migrations.
• Strong background in Databricks Structured Streaming and real-time data processing.
• Experience working with Oracle, SQL Server, and Informatica.
• Ability to independently design and implement scalable data engineering solutions.
• Understanding of the Banking, Financial Services, and Insurance (BFSI) domain.

Additional Preferred Skills:

• Azure Cloud and Databricks administration.
• CI/CD, Git, Azure DevOps, or GitLab.
• Spark performance tuning and optimization.
• Technical leadership and stakeholder management experience.
• Databricks certifications would be an added advantage.

• Develop and enhance FastAPI-based services and integrations.
• Build scalable ETL/ELT pipelines using Databricks and PySpark.
• Lead Unity Catalog migration and data modernization initiatives.
• Implement and optimize real-time streaming solutions.
• Collaborate with business and engineering teams to deliver enterprise-grade data solutions.

Informujemy, że administratorem danych jest z siedzibą w , ul.(dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.