Databricks Engineer
Tech Stack / Keywords
Firma i stanowisko
MW Consulting is hiring for a position to cooperate on a B2B basis for their customer Avanade Poland.
Wymagania
- Commercial experience with Databricks
- Experience with Azure cloud and services (e.g., Azure Data Factory, Data Lake, SQL Database, Azure Databricks)
- Proficiency in Python and PySpark
- Proficiency in SQL
- Knowledge of data engineering concepts such as ETL, data modeling, data warehousing, and data governance
- English language proficiency (B2)
Nice to have:
- Experience with Docker/Kubernetes
- Knowledge of OCR and libraries like easyOCR
- Experience in data science area
Obowiązki
- Designing, building, and maintaining scalable, efficient, and reliable data pipelines
- End-to-end development of data architectures and ETL processes
- Collaborating with data scientists, analysts, and other engineering teams to ensure data integration and optimization
- Implementing best engineering practices across data systems
- Optimizing performance of data workflows and ensuring the reliability of data solutions
- Staying up-to-date with the latest developments in data engineering
- Mentoring and providing guidance to junior data engineers
- Possibility to develop skills in advanced AI technologies
Inne informacje
Aplikując, wyrażam zgodę na przetwarzanie moich danych osobowych na potrzeby przeprowadzenia procesu rekrutacyjnego. Informujemy, że administratorem danych jest Avanade Poland Sp.z.o.o z siedzibą w Krakowie, ul. Pawia 21 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
MW Consulting
6 aktywnych ofert