Senior Data Engineer (Databricks)
Tech Stack / Keywords
Firma i stanowisko
We’re looking for an experienced Senior Data Engineer to join a long-term data transformation project for an international company operating in the retail sector. The project involves working on a modern cloud-based data platform to build scalable data solutions supporting customer analytics, pricing optimization, inventory management, and business decision-making across multiple markets. The role includes collaboration with data engineers, analytics teams, and business stakeholders using modern Data & AI technologies.
Wymagania
- 5+ years of commercial experience as a Data Engineer.
- Strong hands-on experience with Databricks.
- Excellent knowledge of Apache Spark and PySpark.
- Very good SQL skills.
- Experience working with Delta Lake.
- Hands-on experience with Azure cloud services (especially Azure Data Lake Storage and Azure Data Factory).
- Experience designing and maintaining modern ETL/ELT pipelines.
- Good understanding of data modeling principles and data warehousing concepts.
- Experience with Git and CI/CD practices.
- Strong communication skills and ability to work in an Agile environment.
- Professional proficiency in English (B2+).
Nice to have:
- Experience with Apache Kafka or event-driven architectures.
- Knowledge of Terraform or Infrastructure as Code.
- Experience working with Power BI or other BI platforms.
- Familiarity with Azure DevOps.
- Experience supporting Data Science or Machine Learning initiatives.
Obowiązki
- Design, build, and optimize scalable data pipelines using Databricks and Apache Spark.
- Develop and maintain ETL/ELT workflows for large-scale data processing.
- Build and manage data models based on Delta Lake architecture.
- Integrate data from multiple internal and external sources.
- Collaborate with Data Analysts, Data Scientists, and business stakeholders to deliver trusted datasets.
- Ensure data quality, performance, scalability, and reliability across the platform.
- Participate in architecture discussions and contribute to continuous improvements of the data ecosystem.
- Support CI/CD processes and infrastructure best practices.
Benefity
- 100% remote work.
- B2B cooperation.
- Long-term international project.
- Rare visits to the client’s office when required.
- Opportunity to work with modern Data & AI technologies.
- Supportive and collaborative engineering environment.
- Flexible working hours.
- Competitive compensation.
Inne informacje
Informujemy, że administratorem danych jest RemoDevs z siedzibą w Gdański, ul. Szafrania (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Hello HR oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
RemoDevs
16 aktywnych ofert