Senior Data Engineer – Graph Databases & Knowledge Graphs

190 - 210 PLN/ godz./ godz.B2BB2B (netto)

SeniorHybryda·KrakówFull-time·B2B

#473251·Dodano wczoraj·1

Źródło: Antal

Aplikuj teraz

Tech Stack / Keywords

Python SQLgraph databasesknowledge graphsETL/ELTNoSQLCI/CD Neo4jAmazon NeptuneJanusGraph

Podsumowanie oferty

Dołączysz do projektu budowy i rozwoju platformy zarządzania wiedzą Enterprise Knowledge Platform w międzynarodowym środowisku bankowym. Będziesz projektować architekturę danych oraz tworzyć wydajne pipeline’y z wykorzystaniem baz grafowych, knowledge graphs, Pythona i SQL.

Wymagania

Wymagania:

Kilkuletnie doświadczenie komercyjne na stanowisku Data Engineer / Senior Data Engineer lub podobnym.
Bardzo dobra znajomość Pythona i SQL.
Praktyczne doświadczenie z grafowymi bazami danych i/lub knowledge graphs (np. Neo4j, Amazon Neptune, JanusGraph lub podobne technologie).
Doświadczenie w projektowaniu i rozwijaniu produkcyjnych pipeline’ów ETL/ELT.
Dobra znajomość modelowania danych w relacyjnych oraz NoSQL bazach danych.
Doświadczenie w pracy z danymi ustrukturyzowanymi i nieustrukturyzowanymi.
Znajomość zagadnień związanych z jakością danych, data lineage, ewolucją schematów oraz niezawodnością przetwarzania danych.
Doświadczenie w pracy ze środowiskami chmurowymi, narzędziami do orkiestracji danych oraz procesami CI/CD.
Umiejętność samodzielnego rozwiązywania złożonych problemów technicznych.
Dobre umiejętności komunikacyjne i nastawienie na współpracę.

Mile widziane:

Doświadczenie z ontologiami, RDF, SPARQL lub technologiami semantycznymi.
Znajomość języków zapytań grafowych, takich jak Cypher lub Gremlin.
Doświadczenie w budowaniu platform zarządzania wiedzą lub rozwiązań do zarządzania metadanymi.
Doświadczenie w sektorze bankowym, finansowym lub innych środowiskach regulowanych.

Obowiązki

Zakres obowiązków:

Projektowanie, rozwój i utrzymanie skalowalnych pipeline’ów danych do ingestowania, transformacji, wzbogacania i przetwarzania danych ustrukturyzowanych oraz nieustrukturyzowanych.
Projektowanie i optymalizacja modeli danych z wykorzystaniem relacyjnych, grafowych oraz NoSQL baz danych.
Praca z grafowymi bazami danych i knowledge graphs, w tym modelowanie encji i relacji oraz projektowanie wydajnych mechanizmów ładowania i odpytywania danych.
Tworzenie reużywalnych komponentów do przetwarzania danych oraz integracji z różnymi źródłami danych i API.
Implementacja mechanizmów zapewniających jakość danych, walidację, data lineage oraz provenance.
Zapewnienie niezawodności i skalowalności pipeline’ów, w tym obsługa przetwarzania przyrostowego, błędów, ponawiania operacji i mechanizmów odzyskiwania danych.
Współpraca z architektami, inżynierami i zespołami biznesowymi przy przekładaniu wymagań na rozwiązania techniczne.
Udział w automatyzacji testów, procesach CI/CD, monitorowaniu oraz ciągłym doskonaleniu rozwiązań Data Engineering.

Benefity

Możliwość pracy przy rozwoju platformy Enterprise Knowledge Platform w międzynarodowym środowisku bankowym.
Udział w projekcie wykorzystującym technologie grafowe, nowoczesne architektury danych oraz rozwiązania do zarządzania wiedzą.
Współpraca z doświadczonymi inżynierami i architektami.
Wpływ na projektowanie i rozwój skalowalnych, reużywalnych rozwiązań wykorzystywanych w różnych obszarach organizacji.

Antal

825 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz