Data Engineer Middle
Tech Stack / Keywords
Firma i stanowisko
Itransition is looking for a talented Data Engineer to develop high quality software systems using modern technologies.
Wymagania
- 2+ years experience with Python, including strong knowledge of data libraries like pandas, multiprocess, and Google Cloud SDK.
- 2+ years experience in ETL/ELT technologies such as REST API, GraphQL, DBT and data pipeline orchestration tools like Airflow, Astronomer, DBT cloud.
- Hands-on experience with Snowflake.
- Problem-solving and root cause analysis in live production systems.
- Experience querying and transforming large volumes of data with SQL Server, Oracle, MySQL, BigQuery, and Snowflake.
- Comfortable working with data formats JSON, AVRO, XML, CSV, including compressed and encoded files.
- English proficiency sufficient for international environments.
Obowiązki
- Solve complex technical issues while developing high quality software systems using modern technologies.
- Query and transform large volumes of data, ensuring data quality and validation.
- Work with serialized data formats and compressed/encoded files.
- Ingest data using REST API and perform data transformations and loading/unloading.
Nice to have:
- Design and implement data pipelines over cloud architecture.
- Work with CI/CD deployments.
- Use GIT for version control.
Benefity
- Projects for clients such as PayPal, Wargaming, Xerox, Philips, Adidas, and Toyota.
- Competitive compensation based on qualifications and skills.
- Career development system with clear skill qualifications.
- Flexible working hours.
- Options to work remotely.
Inne informacje
Informujemy, że administratorem danych jest Itransition z siedzibą w Warsaw, Al. Jerozolimskie 123A (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
Itransition
38 aktywnych ofert