Data Engineer

Svitla Systems Inc. is looking for a Data Engineer for a full-time position in Europe, working with one of the world's largest and fastest-growing job sites. The role focuses on supporting a large-scale data platform modernization effort.

• 3+ years of industry experience working with large-scale datasets, including Airflow and Spark.
• Strong software engineering fundamentals.
• Hands-on experience with Python development.
• Advanced SQL, including complex joins, CTEs, window functions, and performance tuning.
• Experience with Snowflake data modeling.
• Experience developing and testing pipelines in Apache Airflow and Python.
• Experience with Apache Kafka.
• Experience with Apache Spark, including hands-on PySpark.
• Experience with Iceberg and Parquet data formats.
• Experience with AWS, particularly S3 (data lakes, partitioning, and lifecycle policies).
• Testing strategy experience, with the ability to debug and test code hands-on.
• Strong communication skills.
• Ability to work independently.

Nice to have:

• Hands-on experience with Snowflake migrations (data warehouse modernization, performance and cost optimization).
• Experience with Apache Airflow migrations (version upgrades, executor changes, or platform migrations).
• Experience using AI tools for development.

• Carry out the migration of approximately 1,000 datasets to Snowflake, with Apache Airflow 3 handling orchestration.
• Migrate a set of pipelines from Apache Airflow 2 to Airflow 3.
• Migrate Confluent connections to a new region.
• Migrate a set of pipelines from Hive to Iceberg using Snowpark Connect.
• Adapt existing data pipelines to Snowflake while ensuring data quality and reliability.
• Support workflow scheduling and monitoring in Apache Airflow.

Informujemy, że administratorem Twoich danych osobowych jest SVITLA EUROPE SPÓŁKA Z O.O. z siedzibą w (31-323) Krakowie przy ul. Opolskiej 110 (dalej „SVITLA”). Możesz skontaktować się z nami listownie (na adres podany powyżej) lub poprzez e-mail: [email protected]. Informujemy również, że w SVITLA został wyznaczony Inspektor Ochrony Danych. Informacje na temat przetwarzania danych osobowych w spółce można uzyskać pod adresem e-mail: [email protected].

Zebrane przez nas dane osobowe będą przetwarzane w celu rekrutacji na stanowisko wskazane w ogłoszeniu o pracę lub w celu pośredniczenia przez SVITLA w nawiązaniu relacji biznesowych ze spółkami z nią powiązanymi lub jej zweryfikowanymi kontrahentami.

Zamierzamy przetwarzać Twoje dane osobowe przez czas trwania rekrutacji i naszej współpracy (dłuższy okres retencji danych osobowych może wynikać z przedawnienia roszczeń lub obowiązków nałożonych na nas przepisami prawa, np. w zakresie przechowywania dokumentów księgowych).

Może się zdarzyć, że Twoje dane osobowe będą przetwarzane transgranicznie przez grupę naszych przedsiębiorców lub zweryfikowanych kontrahentów. Zapewniamy odpowiednie bezpieczeństwo Twoich danych osobowych, stosując obowiązujące reguły korporacyjne, a także tzw. standardowe klauzule umowne dotyczące ochrony danych.

Na mocy RODO przysługują Ci określone prawa w związku z przetwarzaniem Twoich danych osobowych:

masz prawo do uzyskania informacji o tym, jakie dane osobowe dotyczące Ciebie są przez nas przetwarzane oraz do otrzymania ich kopii (prawo dostępu);

jeżeli przetwarzane dane staną się nieaktualne, niekompletne lub niedokładne, masz prawo do ich sprostowania;

możesz żądać od nas usunięcia Twoich danych osobowych, przy czym w takim przypadku nie będzie możliwe zawarcie umowy ze spółkami z grupy SVITLA lub z jej kontrahentami;

możesz w każdej chwili wycofać zgodę na przetwarzanie danych i zażądać ich usunięcia (chyba że przetwarzanie odbywa się na innej podstawie prawnej);

masz prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych, jeżeli uznasz, że przetwarzanie Twoich danych osobowych narusza RODO;

nie ma prawnego obowiązku udostępniania nam swoich danych osobowych, jednak bez tego nie jest możliwe zawarcie umowy.