Middle Data Engineer (Poland-based)
Tech Stack / Keywords
Firma i stanowisko
Itransition is recruiting a Data Engineer to work on high quality software systems using modern technologies. The projects include clients such as PayPal, Wargaming, Xerox, Philips, Adidas, and Toyota.
Wymagania
- 2+ years of experience with Python, including data libraries (pandas, multiprocess, Google Cloud SDK)
- 2+ years of experience in ETL/ELT technologies such as REST API, GraphQL, DBT, and data pipeline orchestration tools like Airflow, Astronomer, DBT cloud
- Hands-on experience with Snowflake
- Experience with SQL databases: SQL Server, Oracle, MySQL, BigQuery, Snowflake
- Ability in problem-solving and root cause analysis in live production systems
- Comfortable with various serialized data formats (JSON, AVRO, XML, CSV) and compressed/encoded files
- Skilled in data ingestion using REST APIs, data transformation, and data loading/unloading techniques
- Proficient in English (B2 level)
Obowiązki
- Solve complex technical issues while developing high quality software systems
- Query and transform large volumes of data
- Perform data quality and data validation tasks
- Work with serialized data formats such as JSON, AVRO, XML, CSV, and compressed files
- Ingest data using REST APIs and perform data transformations
Nice to have:
- Design and implement data pipelines over cloud architecture
- Work with CI/CD deployments
- Experience with GIT
Benefity
- Projects for clients like PayPal, Wargaming, Xerox, Philips, Adidas, and Toyota
- Competitive compensation based on qualifications and skills
- Career development system with clear skill qualifications
- Flexible working hours
- Options for remote work
Inne informacje
Informujemy, że administratorem danych jest Itransition z siedzibą w Warsaw, Al. Jerozolimskie 123a (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
Itransition
36 aktywnych ofert