GenAI Data Engineer
Tech Stack / Keywords
Firma i stanowisko
Zespół rozwijający platformę do przetwarzania i udostępniania danych niestrukturalnych, takich jak dokumenty, obrazy i nagrania audio, wspierające wyszukiwanie semantyczne, RAG oraz narzędzia typu „chat with data” dla banku PKO BP.
Wymagania
- Dobra znajomość Pythona i/lub Rusta
- Doświadczenie w budowie pipeline’ów i usług przetwarzających dane
- Praktyczna znajomość wektorowych baz danych, w szczególności Qdrant
- Znajomość embeddingów, wyszukiwania semantycznego, filtrowania po metadanych i indeksowania
- Doświadczenie z REST API, mile widziana znajomość FastAPI
- Znajomość architektury sterowanej zdarzeniami, np. Kafka lub Pub/Sub
- Dobra znajomość systemu Linux
- Znajomość relacyjnych baz danych, np. PostgreSQL
Nice to have:
- Doświadczenie z Kubernetes, Docker oraz CI/CD
- Znajomość GCP, BigQuery, Dataflow, Dataproc lub Pub/Sub
- Znajomość Apache Airflow, Spark lub Beam
- Doświadczenie z OCR, transkrypcją audio oraz konwersją dokumentów
- Znajomość baz grafowych, np. Neo4j
- Doświadczenie z Knowledge Graph, GraphRAG lub klasycznymi rozwiązaniami RAG
Obowiązki
- Budowa i rozwój pipeline’ów przetwarzania danych w trybie online i offline
- Przetwarzanie dokumentów, obrazów i nagrań audio, w tym ekstrakcja tekstu i metadanych
- Tworzenie usług oraz integracji API w Python i/lub Rust
- Indeksowanie danych i rozwój wyszukiwania semantycznego z wykorzystaniem Qdrant
- Integracja z modelami embeddingowymi i rozwiązaniami GenAI
- Wdrażanie, monitorowanie i utrzymywanie rozwiązań zgodnie z podejściem DevSecOps
- Diagnozowanie incydentów oraz dbanie o jakość, wydajność i niezawodność procesów
Inne informacje
Informujemy, że administratorem danych jest PKO BP Finat sp. z o.o. z siedzibą w Warszawie, ul. Chmielna 89. Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
PKO BP Finat sp. z o.o.
57 aktywnych ofert