ACQA Big Data Engineer | Krakow / Wroclaw
Tech Stack / Keywords
Firma i stanowisko
ACQA is a strategic platform built on Microsoft Azure, providing next-generation valuation and risk management services across Front Office, Finance and Risk. The platform is designed around scalable and cost-efficient cloud infrastructure, open architecture, automated data lineage and transparent cost management. It provides a shared technology platform that enables multiple teams to build and operate their solutions in a consistent and efficient way. As part of the team, you will contribute to the development of Big Data solutions and to the underlying platform, tooling and automation used by other engineering teams.
Wymagania
- 6+ years of professional software engineering experience
- Strong commercial experience with Scala and/or Java
- Hands-on experience with Apache Spark and distributed data processing
- Experience with Azure Databricks or a comparable Spark-based platform
- Experience working with Microsoft Azure or another major public cloud provider
- Experience developing or operating CI/CD pipelines, preferably using GitLab
- Practical experience with containerisation and Kubernetes
- Strong understanding of software engineering principles and production systems
- Good communication and collaboration skills, with the ability to work effectively across multiple teams
Nice to have:
- Production experience with Terraform, preferably in an Azure environment
- Python development experience
- Experience with observability, instrumentation, monitoring and alerting
- Knowledge of data structures, algorithms and information modelling
- Experience with technical architecture and low-level design
- Experience working in Agile development environments
- Experience working in large, globally distributed engineering teams
Obowiązki
- Design, develop and maintain production-grade software using Scala, Java and Apache Spark
- Develop and support Big Data solutions running on Azure Databricks
- Build automation and tooling for managing Databricks environments
- Enable multiple engineering teams to develop and operate Big Data solutions on the ACQA platform
- Manage and enhance the Databricks platform, including monitoring and operational tooling
- Define and implement best practices for platform and runtime upgrades
- Develop and maintain CI/CD pipelines and automated deployment processes
- Work with containerised development, build and runtime environments, including Kubernetes
- Contribute to technical architecture and low-level design
- Implement effective testing, observability, monitoring and alerting practices
- Collaborate with globally distributed engineering teams and contribute to architectural and technical decisions
Inne informacje
Informujemy, że administratorem danych jest z siedzibą w , ul.(dalej jako "administrator"). Masz prawo do żądania dostępu do swoich danych osobowych, ich sprostowania, usunięcia lub ograniczenia przetwarzania, prawo do wniesienia sprzeciwu wobec przetwarzania, a także prawo do przenoszenia danych oraz wniesienia skargi do organu nadzorczego. Dane osobowe przetwarzane będą w celu realizacji procesu rekrutacji. Podanie danych w zakresie wynikającym z ustawy z dnia 26 czerwca 1974 r. Kodeks pracy jest obowiązkowe. W pozostałym zakresie podanie danych jest dobrowolne. Odmowa podania danych obowiązkowych może skutkować brakiem możliwości przeprowadzenia procesu rekrutacji. Administrator przetwarza dane obowiązkowe na podstawie ciążącego na nim obowiązku prawnego, zaś w zakresie danych dodatkowych podstawą przetwarzania jest zgoda. Dane osobowe będą przetwarzane do czasu zakończenia postępowania rekrutacyjnego i przez okres możliwości dochodzenia ewentualnych roszczeń, a w przypadku wyrażenia zgody na udział w przyszłych postępowaniach rekrutacyjnych - do czasu wycofania tej zgody. Zgoda na przetwarzanie danych osobowych może zostać wycofana w dowolnym momencie. Odbiorcą danych jest serwis Just Join IT oraz inne podmioty, którym powierzyliśmy przetwarzanie danych w związku z rekrutacją.
DCV Technologies
106 aktywnych ofert