Data Engineer
Brak informacji o wynagrodzeniu
MidFull-time
#441062·Dodano wczoraj·0
Źródło: In4geTech Stack / Keywords
PySparkDatabricksSnowflakePythonSQLAWSAzureGCPAirflowdbt
Firma i stanowisko
In4ge jest firmą rekrutacyjną, której celem jest połączenie najbardziej utalentowanych pracowników z odpowiednimi firmami, tworząc synergiczne relacje, przyczyniające się do wzrostu i sukcesu każdej ze stron. Firma działa na rynku rekrutacyjnym i realizuje projekty dla klientów z USA, głównie w tematyce podatkowej i finansowej.
Wymagania
- Doświadczenie jako Data Engineer lub w pokrewnej roli.
- Bardzo dobra znajomość Python / PySpark oraz SQL.
- Praktyczne doświadczenie z platformami danych: Databricks (Delta Lake) lub Snowflake.
- Znajomość co najmniej jednej z głównych platform chmurowych (AWS, Azure lub GCP).
- Znajomość języka angielskiego na poziomie min. B2/C1 (płynna komunikacja techniczna i codzienne spotkania z zespołami z USA).
- Znajomość języka polskiego na poziomie umożliwiającym płynną i swobodną komunikację.
Nice to have:
- Doświadczenie z narzędziami orkiestracji (Airflow, Prefect, Dagster).
- Znajomość dbt (data build tool).
- Certyfikaty Databricks Certified Data Engineer lub SnowPro Core.
Obowiązki
- Projektowanie, budowanie i optymalizacja skalowalnych potoków danych (ETL/ELT) w PySpark.
- Implementacja i rozwój hurtowni oraz lakehouse’ów w oparciu o Databricks oraz Snowflake.
- Bezpośrednia współpraca z inżynierami i interesariuszami biznesowymi po stronie klientów z USA.
- Dbałość o jakość, niezawodność i monitoring przetwarzania danych na dużą skalę.
- Wdrażanie dobrych praktyk z zakresu DataOps i CI/CD.
Benefity
- Współpraca w modelu B2B.
- Realny wpływ na architekturę w dynamicznych, zaawansowanych technologicznie projektach w USA.
- Projekty o tematyce podatkowej i finansowej.
- Godziny współpracy zgodne z czasem polskim.
in4ge sp. z o.o.
264 aktywne oferty