Senior Databricks Data Engineer

Our Client's Insights & Data division consists of over 400 professionals delivering advanced data-driven solutions.

• Commercial experience in data engineering with hands-on Databricks expertise.
• Strong programming skills in Python for automation and data transformation.
• Experience with at least one major cloud platform (AWS, Azure, or GCP).
• Strong communication skills and proficiency in English.

Nice to have:

• Solid understanding of SQL, including query optimization and data modeling.
• Familiarity with DevOps methodologies, CI/CD pipelines, and Infrastructure as Code (e.g., Terraform, Bicep).
• Experience with real-time data streaming technologies (e.g., Kafka, Spark Streaming).
• Knowledge of cloud storage solutions like Data Lake, Snowflake, or Synapse.
• Hands-on experience with PySpark for distributed data processing.
• Relevant certifications such as Databricks Certified Data Engineer Associate or cloud-based data certifications.

• Design and implement data processing solutions using Databricks for large-scale datasets.
• Design, build, and enhance data pipelines utilizing Python and cloud-native tools.
• Collaborate with solution architects to define and uphold best practices in data engineering.
• Ensure data consistency, security, and scalability within cloud environments.

Informujemy, że administratorem danych jest Optiveum sp. z o.o. z siedzibą w Lublinie ul. Tomasza Zana 43 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.