Lead Data Architect
Tech Stack / Keywords
Firma i stanowisko
ITLT supports partner companies in transforming ambitious ideas into digital reality by co-creating IT solutions and providing expert personnel to accelerate digital transformation. The project involves building and developing a modern data platform from scratch for a global automotive organization, focusing on designing and developing a Data Lakehouse/Data Warehouse architecture within GCP and Databricks environments.
Wymagania
- Minimum 10 years of experience in Data Engineering, Data Architecture, or similar.
- Strong experience with Databricks and Apache Spark, preferably in GCP environment.
- Practical knowledge of GCP, especially BigQuery and Cloud Storage.
- Proficiency in Python/PySpark and advanced SQL.
- Experience designing and optimizing large-scale data pipelines.
- Know-how of Data Warehouse/Data Lake/Lakehouse architecture and Delta Lake.
- Expertise in designing Data Governance, security, and access control mechanisms.
- Ability to analyze and design more efficient and scalable solutions.
- Experience working with Data Engineering teams and non-technical stakeholders.
- Capability to make architectural decisions and translate them into technical implementations.
- Very good command of English.
Nice to have:
- Certification as Databricks Data Engineer or Google Cloud Professional Data Engineer.
- Experience with Kafka, Pub/Sub, Airflow/Cloud Composer.
- Knowledge of dbt/Dataform.
- Experience with Terraform and CI/CD.
- Experience with Power BI or Looker.
- Practical knowledge of RAG, Vector Databases, embeddings, or integration of LLM with data platforms.
- Experience in AI/ML projects.
Obowiązki
- Design and develop Data Lakehouse/Data Warehouse architecture in GCP and Databricks.
- Design, develop, and optimize data pipelines using Spark, PySpark, Python, and SQL.
- Design data models and standards for Data Governance, security, and Data Lineage.
- Optimize performance and cost of data processing and existing solutions.
- Collaborate with Data Engineers, analysts, and business teams to translate needs into technical solutions.
- Develop CI/CD processes and cooperate with DevOps and Security teams.
- Design data foundations supporting AI, RAG, and solutions based on LLM.
- Recommend technological improvements and define best practices in Data Architecture.
Benefity
- Long-term B2B cooperation with IT LeasingTeam.
- Work on greenfield data platform development in a global automotive organization.
- Significant influence on architectural decisions and technology standards.
- Flexible hybrid work model with possibility of reduced office presence for non-local candidates.
- Access to benefits: MultiSport, PZU insurance, LuxMed healthcare.
- Direct contact with ITLT recruiter and transparent recruitment process.
Inne informacje
Informujemy, że administratorem danych jest IT Leasing Team z siedzibą w Warszawie, ul.Taśmowa 7 (dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
ITLT
131 aktywnych ofert