SQUARE ONE RESOURCES

Data Engineer – Data Contracts & Quality (GCP)

130 - 140 PLN/ godz./ godz.B2BB2B (netto)

MidZdalnie·WarszawaFull-time·B2B

#474623·Dodano 8 dni temu·2

Źródło: nofluffjobs.com

Aplikuj teraz

Tech Stack / Keywords

GCP SQL CI/CDData Warehousing / Big DataDataContractsJSON Schema / OpenAPIdbtDataformKnowledge Catalog (dawniej Dataplex)Data CatalogPython

Podsumowanie oferty

Projekt dla dużej firmy z sektora telekomunikacyjnego obejmuje rozwój i utrzymanie rozwiązań z obszaru Data Governance i Data Quality. Głównym zadaniem jest wdrażanie i automatyzacja Data Contracts w środowisku Google Cloud Platform, w tym zapewnianie spójności schematów i automatycznej walidacji jakości danych.

Wymagania

Doświadczenie z GCP.
Praktyczna znajomość Data Contracts, w tym definiowania kontraktów i wymagań jakościowych, oraz narzędzi wspierających automatyzację kontraktów, np. OpenAPI, JSON Schema, narzędzi CI/CD i narzędzi do kontroli jakości danych.
Doświadczenie w analizie, przetwarzaniu i modelowaniu danych oraz znajomość architektury rozwiązań hurtowni danych i Big Data.
Zaawansowana znajomość tworzenia zapytań SQL, poparta praktycznym doświadczeniem zawodowym.
Znajomość języka angielskiego na poziomie B1.

Obowiązki

Implementowanie, wdrażanie i utrzymywanie Data Contracts w środowisku GCP na podstawie uzgodnionych specyfikacji, architektury i standardów.
Implementowanie i aktualizowanie schematów danych oraz reguł walidacji w kontraktach zgodnie z uzgodnionymi wymaganiami jakościowymi.
Implementowanie automatycznej walidacji schematów i zgodności danych z kontraktami oraz współpraca przy integracji tych mechanizmów z procesami CI/CD.
Tworzenie zapytań SQL na potrzeby analizy danych, weryfikacji wymagań jakościowych i identyfikowania niezgodności z kontraktami.
Analizowanie, przetwarzanie i modelowanie danych na potrzeby definiowania i wdrażania kontraktów w rozwiązaniach hurtowni danych i Big Data.
Współpraca z zespołami produktowymi, Data Engineering, BI oraz właścicielami danych przy uzgadnianiu wymagań, definiowaniu kontraktów i rozwiązywaniu wykrytych niezgodności.
Udział w doborze narzędzi wspierających automatyzację kontraktów oraz doskonaleniu procesów ich tworzenia, aktualizowania i utrzymywania.

Benefity

Dofinansowanie do karty sportowej.
Prywatna opieka medyczna.

Karta sportowa

Opieka zdrowotna

SQUARE ONE RESOURCES

114 aktywnych ofert

Zobacz wszystkie oferty

Aplikuj teraz