Senior Databricks Engineer

We’re looking for specialists open to cooperate on B2B basis, for our customer – Avanade Poland.

• Commercial experience with Databricks
• Experience with Azure cloud and services (e.g., Azure Data Factory, Data Lake, SQL Database, Azure Databricks)
• Proficiency in Python and PySpark
• Strong knowledge of SQL
• Understanding of data engineering concepts such as ETL, data modeling, data warehousing, data governance
• Experience with Docker and Kubernetes
• English language proficiency at B2 level

Nice to have:

• Knowledge of OCR and corresponding libraries (e.g., easyOCR)
• Any experience in data science area

• Designing, building, and maintaining scalable, efficient, and reliable data pipelines
• End-to-end development of data architectures and ETL processes
• Collaborating with data scientists, analysts, and other engineering teams to ensure data integration and optimization
• Implementing best engineering practices across data systems
• Optimizing performance of data workflows and ensuring the reliability of data solutions
• Staying up-to-date with the latest developments in data engineering world
• Acting as a Team Lead in the project if needed
• Possibility to develop yourself in AI engineering

Aplikując, wyrażam zgodę na przetwarzanie moich danych osobowych na potrzeby przeprowadzenia procesu rekrutacyjnego. Informujemy, że administratorem danych jest Avanade Poland Sp.z.o.o z siedzibą w Krakowie, ul. Pawia 21 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.