Team Connect Sp. z o.o.

Data Engineer (GCP)

120 - 130 PLN/ godz./ godz.B2BB2B (netto)

MidHybryda·WarszawaFull-time·B2B

#449989·Dodano miesiąc temu·2

Źródło: justjoin.it

Aplikuj teraz

Tech Stack / Keywords

SQL Google Cloud Platform

Podsumowanie oferty

Data Engineer będzie projektować, implementować i rozwijać rozwiązania Data Engineering na Google Cloud Platform, w tym BigQuery, Cloud Storage i Pub/Sub. Rola obejmuje migrację procesów z Oracle/on-premise do GCP oraz rozwój procesów wsadowych i strumieniowych. Odpowiedzialności obejmują także analizę danych, optymalizację zapytań SQL oraz wsparcie testów i wdrożeń.

Wymagania

Poziom Middle Data Engineer z komercyjnym doświadczeniem w projektowaniu i implementacji procesów integracji lub przetwarzania danych
Dominująca praktyka na platformie Google Cloud Platform, zwłaszcza z BigQuery, Cloud Storage i Pub/Sub
Praktyczne doświadczenie z Oracle, w tym tworzenie i optymalizacja zapytań SQL oraz praca z dużymi wolumenami danych
Doświadczenie developerskie z Informatica PowerCenter pozwalające na samodzielną analizę i modyfikację procesów ETL, choć technologia ta nie jest głównym obszarem roli

Obowiązki

Projektowanie, implementacja i rozwój rozwiązań Data Engineering na Google Cloud Platform z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub
Migracja i przebudowa procesów przetwarzania oraz zasilania danych z Oracle/on-premise do GCP
Projektowanie i rozwój procesów wsadowych (batch) oraz strumieniowych (streaming), wraz z mechanizmami kontroli jakości, ponawiania i obsługi błędów
Projektowanie struktur i modeli danych w BigQuery z uwzględnieniem wydajności, skalowalności oraz kosztu przetwarzania i składowania danych
Analiza danych oraz przygotowywanie modeli danych dla Oracle, PostgreSQL i warstw danych w GCP
Tworzenie, analiza i strojenie zapytań SQL, w tym analiza planów wykonania i identyfikowanie wąskich gardeł
Analiza istniejących procesów Informatica PowerCenter oraz migracja do rozwiązań docelowych w GCP
Implementacja logiki transformacji, walidacji i integracji danych w SQL oraz Python, jeśli wynika to z rozwiązania
Wykonywanie analizy technicznej, analizy wpływu i zależności oraz udział w uzgadnianiu specyfikacji
Przygotowanie testów jednostkowych, integracyjnych oraz wsparcie testów systemowych, wydajnościowych, regresji i UAT
Przygotowanie zmian do wdrożenia, instrukcji wdrożenia oraz wsparcie wdrożenia i weryfikacji powdrożeniowej
Diagnozowanie i usuwanie incydentów oraz udział w analizie przyczyn problemów związanych z przetwarzaniem i jakością danych
Tworzenie i aktualizacja dokumentacji technicznej oraz praca z repozytorium kodu i procesami CI/CD zgodnie z modelem DevOps

Benefity

Długofalowa współpraca
Pakiet benefitów: Multisport, prywatna opieka medyczna, ubezpieczenie na życie
Budżet szkoleniowy
Bezpłatne lekcje angielskiego
Indywidualne wsparcie ze strony dedykowanego opiekuna firmy

Karta sportowa

Opieka zdrowotna

Ubezpieczenie

Dofinansowanie szkoleń

Kursy językowe

Inne informacje

Informujemy, że administratorem danych jest Team Connect z siedzibą w Warszawie, ul. Wołodyjowskiego 58. Przetwarzanie danych odbywa się w celu realizacji procesu rekrutacji zgodnie z obowiązującymi przepisami prawa i zasadami ochrony danych osobowych.

Team Connect Sp. z o.o.

21 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz