Lead Data Architect

Projekt dla klienta z branży ubezpieczeniowej w Wielkiej Brytanii obejmujący rozwój i modernizację cyfrowego ekosystemu, w tym platformy danych. Zespół Data korzysta z technologii takich jak Snowflake, ClickHouse oraz Microsoft SQL Server i rozwija rozwiązania chmurowe oraz architekturę danych.

• Eksperckie doświadczenie z Microsoft SQL Server
• Bardzo dobra znajomość: transaction log internals, LSN progression, log truncation, CDC capture i cleanup mechanisms, wpływu AlwaysOn Availability Groups na CDC
• Praktyczne doświadczenie produkcyjne z: SQL Server Native CDC, projektowaniem incremental loads, obsługą dużych wolumenów danych, monitorowaniem opóźnień replikacji
• Doświadczenie w projektowaniu architektury danych end-to-end
• Umiejętność tworzenia diagramów architektonicznych, dokumentowania rozwiązań, analizy kompromisów technologicznych
• Bardzo dobra znajomość języka angielskiego – codzienna współpraca z klientem z Wielkiej Brytanii

Nice to have:

• Doświadczenie z: Qlik Replicate, Debezium, Kafka CDC, Oracle GoldenGate, HVR, Fivetran
• Znajomość: Snowflake, procesów ingestowania danych, Data Quality Frameworks, Infrastructure as Code, rozwiązań chmurowych

• Projektowanie architektury replikacji danych wykorzystującej: SQL Server Native CDC, log-based capture, Change Tracking, batch, streaming oraz hybrydowe modele przesyłania danych
• Projektowanie strategii: incremental data movement, ciągłości LSN, retencji CDC, odzyskiwania danych, failover oraz failback
• Analiza i optymalizacja działania SQL Server, w szczególności: transaction log, VLF management, log backup chain, log reuse waits, AlwaysOn Availability Groups, CDC capture oraz cleanup jobs
• Projektowanie docelowej architektury przepływu danych oraz ocena różnych podejść: SQL Server Native CDC, Qlik Replicate, Debezium, HVR, inne rozwiązania CDC
• Definiowanie strategii zapewniających spójność danych, możliwość ponownego przetwarzania, mechanizmy reconciliation, obsługę zmian schematu danych
• Współpraca z zespołami DBA oraz Data: definiowanie standardów replikacji, poprawa niezawodności platformy, wsparcie techniczne i mentoring
• Przygotowywanie dokumentacji architektonicznej oraz prezentowanie rozwiązań technicznych stakeholderom

Informujemy, że administratorem danych jest Awareson Sp. z.o.o. z siedzibą w Warszawie, ul. Przeskok 2. Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania oraz inne prawa określone w informacji. Podanie danych obowiązkowych jest wymagane na podstawie Kodeksu pracy. Dane będą przetwarzane do czasu zakończenia rekrutacji oraz możliwości dochodzenia roszczeń.