AI Test Automation Engineer 100% (f/m/d) in Madrid

AI Test Automation Engineer 100% (f/m/d) in Madrid

Madrid Full Time 49500 - 60500 € / año (est.) Presencial
Julius Baer

De un vistazo

  • Tareas: Desarrolla soluciones de automatización de pruebas para plataformas de IA y MLOps.
  • Empresa: Julius Baer, líder en gestión de patrimonio con un enfoque innovador.
  • Beneficios: Salario competitivo, beneficios de salud y oportunidades de desarrollo profesional.
  • Otra información: Ambiente dinámico con oportunidades de crecimiento profesional en el sector financiero.
  • Por qué este empleo: Contribuye a la evolución de la gestión de patrimonio con tecnología de vanguardia.
  • Cualificaciones: Experiencia en automatización de pruebas con Python y habilidades de colaboración en equipo.

El salario previsto está entre 49500 - 60500 € por año.

At Julius Baer, we celebrate and value the individual qualities you bring, enabling you to be impactful, to be entrepreneurial, to be empowered, and to create value beyond wealth.

Let’s shape the future of wealth management together.

You will join our ML & AI ART as a Senior Test Automation Engineer, responsible for the technical test automation solution supporting our AI and MLOps platform.

The platform powers AI-driven capabilities across the Bank including RAG systems, LLM-based assistants, agentic workflows, and ML pipelines serving business-critical use cases.

You will own the architecture, implementation, and execution of our test automation frameworks, covering both traditional software components (APIs, UIs, data pipelines) and emerging AI/ML-specific behaviour, and act as the Test Automation Ambassador within the ART.

You will work within the Bank's Test Strategy, while owning the technical depth and hands-on delivery of automation for your platform.

  • YOUR CHALLENGE
  • Define and evolve the technical test automation approach and framework architecture for the ML & AI ART, aligned with the Bank's Test Strategy and Test Policy
  • Design reusable, scalable test automation patterns (page objects, API clients, test data builders) that other engineers across squads can adopt, ensuring technical consistency of test automation across the ART
  • Analyse and evaluate requirements, Features, and Stories for testability during PI Planning, Backlog Refinement, and Iteration Planning
  • Derive test cases from technical and risk analysis of both functional and non-functional requirements (reliability, performance, security, usability, robustness), selecting appropriate test techniques and automation scope based on risk, coverage goals, and ROI
  • Automate identified test cases using Python-based frameworks - Playwright-Python for UI, requests + pytest for APIs, Behave or pytest-bdd for BDD/Gherkin - applying clean code principles, reusability, readability, and stability
  • Design and implement AI/ML-specific test cases: evaluation pipelines for LLM outputs
  • Build and maintain contract tests (e. g. Pact) for platform APIs and microservice boundaries
  • Integrate and orchestrate automated tests in Git Lab CI/CD pipelines, including merge request pipelines, Git Lab runners
  • Leverage Docker and Kubernetes to provision isolated, reproducible test environments
  • Plan, schedule, and trigger automated test executions across environments (DEV, INT, UAT, pre-PROD) - including regression suites, smoke tests, release executions, and on-demand runs tied to merge requests and PI milestones
  • Monitor execution health, investigate and quarantine flaky tests, and maintain a low false-positive rate to keep quality signals trustworthy
  • Triage execution results, raise defects in Jira with evidence (logs, traces, screenshots, videos), and communicate quality signals to the squad, Product Owner, and Test Manager
  • Produce execution evidence (run metadata, artefacts, reports) suitable for audit and release governance, in line with the Bank's Test Policy and retention requirements
  • Contribute actively to PI Planning, System Demos, Inspect & Adapt, and other SAFe ceremonies as part of the ML & AI ART
  • Ensure end-to-end traceability from Jira Features and Stories - automated tests - defects - test results, leveraging the Bank's test management integration
  • Author and maintain BDD scenarios in Gherkin, linked to acceptance criteria on Stories
  • Collaborate closely with Product Owners, Scrum Masters, ML Engineers, MLOps Engineers, and Data Engineers across squads
  • Align work with the Bank's Test Strategy, and reporting requirements, supporting audit-ready artefacts, traceability matrices, and test progress reporting
  • Support root cause analysis of defects using logs and traces
  • Act as Test Automation Ambassador within the ML & AI ART consulting squads on automation design, framework usage, tooling choices, and test data strategy
  • Prepare test data, ensuring synthetic or anonymised data is used wherever possible to meet confidentiality expectations
  • Design AI/ML-specific test datasets where needed
  • Own test maintenance and refactoring in response to UI, API, model, or prompt changes, ensuring continued compliance with access controls and test environment policies

YOUR PROFILE

  • Proven expertise in Python-based test automation: Playwright-Python (UI), Behave or pytest-bdd (Gherkin/BDD), requests + pytest (API/service validation practical equivalence to REST-Assured)
  • Demonstrated ability to design and own test automation frameworks, not just write test scripts including reusable utilities and maintainability patterns
  • Hands-on experience integrating and executing automated tests within CI/CD pipelines, ideally Git Lab or equivalent enterprise platforms
  • Experience with distributed test execution, parallelisation, flaky-test management, and modern reporting tools (Allure, pytest-html, or equivalent)
  • Solid grasp of Git and version control workflows, clean code principles, and code review culture
  • Working knowledge of Docker; familiarity with Kubernetes basics (jobs, namespaces)
  • Exposure to testing AI/ML systems, or strong motivation to develop this expertise: evaluation of LLM outputs, handling non-deterministic responses, evals for RAG and agentic workflows
  • Understanding of API design, microservices, event-driven architectures, and authentication layers
  • Sound understanding of SAFe and Dev Ops principles; experience operating in an Agile Release Train is a plus
  • Experience with Jira for Story/Feature tracking and test management integration (Xray, Agile Hive)
  • Demonstrated end-to-end thinking - connecting user journeys, data flows, authentication layers, and system boundaries
  • Comfortable working within an established Test Strategy, collaborating with Test Managers on execution planning, reporting, and compliance
  • Demonstrated awareness of information security, data privacy, and compliant test data handling in regulated environments
  • Collaborative team player with strong ownership takes automation problems from analysis to execution to resolution with minimal supervision
  • Strong communication skills, able to work effectively with engineers, Product Owners, Scrum Masters, Architects, and Test Managers
  • Strong organisational skills, structured, reliable
  • Bachelor's or Master's degree in Computer Science, Engineering, or a related field
  • Minimum 5-7 years in Test Automation with substantial hands-on Python experience, including demonstrated framework design, ownership, and test execution at scale (not only script-level contributions)
  • Experience in a regulated environment (financial services, healthcare, pharma) strongly preferred
  • Certifications in ISTQB (Foundation as baseline)
  • SAFe (SP, SSM, or equivalent), or Dev Ops disciplines are a plus
  • Exposure to AI/ML systems through testing, development, or applied projects is a strong plus; appetite to develop deep AI/ML testing expertise is essential
  • Fluency in English; German is a plus

We are looking forward to receiving your full job application through our online application tool. Further interesting job opportunities can be found on our Career site.

Is this not quite what you are looking for? Set up a job alert by creating a candidate account here.

AI Test Automation Engineer 100% (f/m/d) in Madrid empresa: Julius Baer

Julius Baer es un excelente empleador que fomenta un ambiente de trabajo dinámico y colaborativo en Madrid, donde la curiosidad y el aprendizaje continuo son fundamentales. Ofrecemos oportunidades de crecimiento profesional y un enfoque en la propiedad del trabajo, lo que permite a nuestros empleados contribuir significativamente al desarrollo de soluciones de software de alta calidad. Únete a nosotros para formar parte de un equipo que valora la innovación y el desarrollo personal.

Julius Baer

Datos de contacto:

Equipo de selección de Julius Baer

Consejo de los expertos de StudySmarter🤫

Creemos que así podrías conseguir AI Test Automation Engineer 100% (f/m/d) in Madrid

✨Conéctate con la Comunidad de Consultoría IT

¡Inscríbete a meetups y eventos de tecnología donde se enfoque en consultoría! Esto no solo te permitirá conocer a otros profesionales del sector, sino también aprender lo que está en tendencia y hacer contactos clave que pueden abrirte puertas. ¡No te olvides de llevar tu tarjeta de presentación!

✨Participa en Foros y Plataformas Especializadas

Únete a comunidades online como Stack Overflow o grupos de LinkedIn específicos de consultoría IT. Aquí podrás hacer preguntas, compartir tu conocimiento y hacerte notar, lo que puede llevar a oportunidades laborales. Cuanto más activo seas, más fácil será que alguien te recomiende.

✨Haz Networking con Reclutadores

Busca reclutadores especializados en consultoría IT. Conectarte directamente con ellos puede ser clave para enterarte de ofertas que no se publican en portales de empleo. Ellos suelen tener contactos cercanos con las empresas que buscan talento.

✨Aplica a Través de Nuestra Web

Ya sabes que en Julius Baer estamos siempre buscando nuevo talento. Aplica directamente a través de nuestra web y asegúrate de destacar lo que te hace único en consultoría IT. Un buen enfoque es resaltar experiencias previas, aunque sean académicas, que te hayan dado las habilidades necesarias para este tipo de trabajo.

Creemos que necesitas estas habilidades para triunfar como AI Test Automation Engineer 100% (f/m/d) in Madrid

Automatización de pruebas en Python
Playwright-Python
Behave o pytest-bdd
requests + pytest
Diseño de frameworks de automatización de pruebas
Integración y ejecución de pruebas automatizadas en CI/CD
Gestión de pruebas distribuidas y paralelización

Algunos consejos para tu solicitud 🫡

Destaca tus habilidades técnicas:En el campo de la consultoría IT, es crucial que tu CV destaque tus habilidades técnicas. Asegúrate de incluir lenguajes de programación, herramientas y marcos que domines, así como cualquier certificación relevante. Esto nos ayudará a ver rápidamente si tienes lo que se necesita para el puesto en Julius Baer.

Ejemplos de proyectos en tu CV:Nada dice más sobre tu experiencia que ejemplos concretos. Si has trabajado en proyectos previos, ya sea en universidades, freelance o en trabajos anteriores, incluye breves descripciones que expliquen tu rol y los resultados. Esto no solo muestra tu capacidad, sino que también da contexto sobre cómo podrías aportar en AI Test Automation Engineer 100% (f/m/d).

Personaliza tu carta de motivación:Dale un toque personal a tu carta de motivación. Explícanos por qué te interesa la consultoría IT y qué te atrae de Julius Baer. Menciona cómo tus experiencias pasadas te han preparado para asumir desafíos en este rol, y sé genuino sobre tus metas y lo que esperas aprender.

Muestra tu proactividad:En la consultoría IT, la proactividad es fundamental. Si has participado en iniciativas adicionales o has aprendido habilidades por tu cuenta, no dudes en mencionarlo. Este tipo de actitud es algo que buscamos en un candidato para el puesto de AI Test Automation Engineer 100% (f/m/d) en Julius Baer.

Cómo prepararte para una entrevista de trabajo en Julius Baer

✨Prepárate para preguntas técnicas

En el mundo de la consultoría IT, es común que te hagan preguntas técnicas durante la entrevista. Asegúrate de revisar conceptos clave relacionados con sistemas, software y herramientas específicas que puedas encontrar en el trabajo. Por ejemplo, preguntas sobre metodologías ágiles o herramientas de gestión de proyectos son bastante comunes.

✨Demuestra tu capacidad de resolución de problemas

Los consultores IT son solucionadores de problemas por naturaleza. Prepárate para presentar un caso práctico durante la entrevista donde puedas demostrar cómo abordas un problema técnico o de negocio. Te ayudaría practicar con ejemplos del pasado y preparar tus estrategias de forma clara y concisa.

✨Conéctate con la cultura de la empresa

Investigar sobre la cultura laboral de Julius Baer es clave. Las empresas de consultoría IT suelen valorar la colaboración y la adaptabilidad, así que piensa en ejemplos en los que hayas trabajado en equipo o te has adaptado a un entorno cambiante. Esto no solo muestra que encajas, sino que también estás interesado en su dinámica de trabajo.

✨Habla de tus experiencias previas

Como candidato a un puesto de tiempo completo, deberías contar historias de tus experiencias pasadas de manera que reflejen tus habilidades y cómo podrías contribuir a Julius Baer. Llévate un portfolio de proyectos que muestre tu trabajo previo y cómo has ayudado a resolver problemas en otras organizaciones. ¡Esto puede marcar la diferencia!