Senior Data Engineer (Graph)

Firma DS STREAM zajmuje się budową zintegrowanej sieci grafowej łączącej miliony podmiotów i osób fizycznych w blisko 10 miliardach relacji, wspierającej analizę ryzyka kredytowego, partnerstw oraz compliance.

• Biegła znajomość środowiska Databricks.
• Praktyczne doświadczenie z co najmniej dwiema grafowymi bazami danych, preferowane Neo4j i/lub TigerGraph.
• Praktyczna znajomość języka zapytań Cypher.
• Bardzo dobra znajomość PostgreSQL, w tym recursive CTE, widoki zmaterializowane, analiza planów zapytań oraz zaawansowane indeksowanie.

Nice to have:

• Znajomość domeny biznesowej KYC / AML.
• Zarządzanie obciążeniami bazodanowymi za pomocą Kubernetes.
• Doświadczenie w deploymentach baz danych w natywnym środowisku AWS.

• Ekstrakcja danych z Databricks, ich transformacja i ładowanie do grafowych baz danych, oraz powtarzanie procesu w kontrolowanych warunkach.
• Budowanie i zarządzanie strukturami relacji oraz powiązań w bazach, aby odzwierciedlały docelowe modele danych produkcyjnych.
• Implementacja zapytań benchmarkowych w natywnych językach jak Cypher, GSQL, nGQL, AQL, openCypher oraz w PostgreSQL.
• Budowa API na potrzeby testowanych silników dla oceny wydajności zapytań na rzeczywistych przypadkach użycia.
• Ewaluacja, punktacja i przygotowanie pisemnej analizy wyników technologicznych dla kierownictwa inżynierii i architektury.