GenAI Data Engineer

Brak informacji o wynagrodzeniu
MidInne·B2B
#432945·Dodano 4 dni temu·1
Źródło: justjoin.it
Aplikuj teraz

Tech Stack / Keywords

PythonRustqdrant

Firma i stanowisko

Zespół rozwijający platformę do przetwarzania i udostępniania danych niestrukturalnych, takich jak dokumenty, obrazy i nagrania audio, wspierające wyszukiwanie semantyczne, RAG oraz narzędzia typu „chat with data” dla banku PKO BP.

Wymagania

  • Dobra znajomość Pythona i/lub Rusta
  • Doświadczenie w budowie pipeline’ów i usług przetwarzających dane
  • Praktyczna znajomość wektorowych baz danych, w szczególności Qdrant
  • Znajomość embeddingów, wyszukiwania semantycznego, filtrowania po metadanych i indeksowania
  • Doświadczenie z REST API, mile widziana znajomość FastAPI
  • Znajomość architektury sterowanej zdarzeniami, np. Kafka lub Pub/Sub
  • Dobra znajomość systemu Linux
  • Znajomość relacyjnych baz danych, np. PostgreSQL

Nice to have:

  • Doświadczenie z Kubernetes, Docker oraz CI/CD
  • Znajomość GCP, BigQuery, Dataflow, Dataproc lub Pub/Sub
  • Znajomość Apache Airflow, Spark lub Beam
  • Doświadczenie z OCR, transkrypcją audio oraz konwersją dokumentów
  • Znajomość baz grafowych, np. Neo4j
  • Doświadczenie z Knowledge Graph, GraphRAG lub klasycznymi rozwiązaniami RAG

Obowiązki

  • Budowa i rozwój pipeline’ów przetwarzania danych w trybie online i offline
  • Przetwarzanie dokumentów, obrazów i nagrań audio, w tym ekstrakcja tekstu i metadanych
  • Tworzenie usług oraz integracji API w Python i/lub Rust
  • Indeksowanie danych i rozwój wyszukiwania semantycznego z wykorzystaniem Qdrant
  • Integracja z modelami embeddingowymi i rozwiązaniami GenAI
  • Wdrażanie, monitorowanie i utrzymywanie rozwiązań zgodnie z podejściem DevSecOps
  • Diagnozowanie incydentów oraz dbanie o jakość, wydajność i niezawodność procesów

Inne informacje

Informujemy, że administratorem danych jest PKO BP Finat sp. z o.o. z siedzibą w Warszawie, ul. Chmielna 89. Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.

PKO BP Finat sp. z o.o.

PKO BP Finat sp. z o.o.

57 aktywnych ofert

Zobacz wszystkie oferty
Aplikuj teraz