Reclutador: David Reyes

Posición: Test Lead IA (Inteligencia Artificial)

Ubicación: CDMX

Industria: Insurance

Modalidad de trabajo: Remoto

Tus funciones:

- Gestión de Pruebas para Soluciones de IA
- Diseñar estrategias de validación para modelos de Machine Learning e IA Generativa.
- Supervisar pruebas funcionales, automatizadas, de integración, rendimiento y seguridad.
- Definir procesos para validar precisión, relevancia y consistencia de modelos de IA.
- Liderar la evaluación de soluciones basadas en:
- Large Language Models (LLMs)
- Chatbots
- Copilots
- Agentes Inteligentes
- Soluciones RAG (Retrieval Augmented Generation)
- Supervisar pruebas de prompts y regresión de prompts.
- Garantizar la identificación temprana de sesgos, alucinaciones y comportamientos inesperados.
- Gestión de Equipos
- Mentorear y desarrollar talento dentro del equipo de QA.
- Realizar seguimiento al desempeño del equipo.
- Promover una cultura de calidad en toda la organización.
- Facilitar la colaboración entre equipos multidisciplinarios.
- Automatización y DevOps
- Impulsar iniciativas de automatización de pruebas.
- Integrar procesos de testing dentro de pipelines CI/CD.
- Definir indicadores de calidad y automatización.
- Asegurar la adopción de prácticas Shift-Left Testing y Continuous Testing.
- Gobierno y Reporteo
- Presentar avances, riesgos y métricas a líderes de proyecto y stakeholders.
- Elaborar reportes ejecutivos de calidad.
- Gestionar auditorías, cumplimiento y controles de calidad.
- Asegurar el cumplimiento de políticas de calidad, seguridad y gobierno de datos.

Conocimientos y experiencia necesaria:

- Test Lead con experiencia en proyectos de Inteligencia Artificial (IA), Machine Learning (ML) e IA Generativa para liderar las estrategias de calidad y pruebas dentro de iniciativas tecnológicas de alta complejidad.
- Será responsable de definir el enfoque de pruebas, coordinar equipos de QA, asegurar la calidad de soluciones basadas en IA y establecer estándares, procesos y métricas que garanticen la confiabilidad, precisión y seguridad de aplicaciones inteligentes. Además, actuará como enlace entre áreas de negocio, desarrollo, ciencia de datos, arquitectura y operaciones.




- Competente con sólida experiencia en liderazgo de equipos de pruebas y aseguramiento de calidad, capaz de definir estrategias de testing para soluciones tradicionales y de Inteligencia Artificial. Debe combinar conocimientos técnicos, visión estratégica y capacidad de gestión para garantizar la entrega de productos confiables, seguros y alineados con los objetivos del negocio.
- Nivel recomendado: Senior / Lead
- Experiencia: 7+ años en QA y Testing, 3+ años liderando equipos
- Idioma: Inglés avanzado (indispensable para proyectos globales)
- Inteligencia Artificial
- Machine Learning
- Generative AI
- Large Language Models (LLMs)
- Prompt Engineering
- RAG Architectures
- AI Agents
- MLOps
- Plataformas Cloud
- Microsoft Azure (preferente)
- Azure AI Foundry
- Azure OpenAI Service
- Azure Machine Learning
- AWS
- Google Cloud Platform
- Conocimientos Específicos de Testing para IA
- Validación de calidad de respuestas generadas por IA.
- Evaluación de precisión y relevancia de resultados.
- Detección y análisis de alucinaciones.
- Identificación de sesgos y riesgos éticos.
- Evaluación de desempeño y escalabilidad de modelos.
- Diseño de métricas de calidad para IA.
- Validación de pipelines de datos y entrenamiento.
- Métricas de Evaluación
- Accuracy
- Precision
- Recall
- F1 Score
- Response Relevancy
- Hallucination Rate
- Groundedness
- Consistency Score
- Certificaciones Deseables
- ISTQB Test Manager o Advanced Level.
- Certified Scrum Master (CSM) o equivalente.
- Microsoft Certified: Azure AI Engineer Associate.
- Microsoft Certified: Azure Fundamentals.
- Certificaciones relacionadas con IA Generativa o Machine Learning.
- Certificaciones DevOps o Cloud.

Habilidades:

Trabajo bajo presión, calidad en el trabajo y orientado a resultados

Tu carrera en Capgemini





- Al trabajar en un ambiente de equipo, nuestros consultores se enfocan en el análisis, diseño y desarrollo de soluciones basadas en tecnología para los clientes de Capgemini.
- Trabajarás en conjunto con especialistas funcionales, técnicos y del negocio para ayudar a desarrollar la implementación e integración de soluciones y sistemas innovadores incluyendo metodologías, técnicas y herramientas.
- Contribuirás de una manera responsable y oportuna con la satisfacción del cliente proporcionando servicios y productos que generan valor agregado.
- Capgemini ofrece una compensación competitiva y beneficios superiores a los de Ley.
- Nuestras oficinas centrales están en París, Francia y tenemos presencia en más de 50 países. Somos más de 340 mil profesionales en México, ubicados en Ciudad de México, Aguascalientes y Monterrey.
- Capgemini ha desarrollado metodologías propias a nivel global: Collaborative Business Experience y Rightshore.

Te encantará trabajar en Capgemini porque:

- Ofrecemos una experiencia única de reclutamiento y onboarding, y te ayudamos a construir las bases de tu carrera y habilidades profesionales.
- Proveemos un ambiente de trabajo colaborativo basado en nuestros 7 valores: Honestidad, Audacia, Confianza, Libertad, Espíritu de Equipo, Modestia y Diversión.
- Promovemos un ambiente que te permite planear y desarrollar tu carrera.

“En Capgemini México, el objetivo es atraer al mejor talento y lograr un ambiente laboral diverso e inclusivo por lo que no se discrimina por motivo de raza, sexo, orientación sexual, identidad o expresión de género o cualquier otra característica propia de la persona. Todas las solicitudes son bienvenidas y serán consideradas para concurso con base en el mérito del candidato contra el trabajo y/o la experiencia para el puesto. Por motivos de validación, usaremos de manera segura tus datos incluyendo pero no limitado a tu imagen en video o screenshots durante los procesos de selección, contratación y/o On boarding , para tu seguridad, puedes revisar nuestro aviso de privacidad en: https://www.capgemini.com/mx-es/aviso-de-privacidad-para-candidatos-a-ocupar-una-vacante/

📌 Test Lead IA (Inteligencia Artificial) (Ciudad de México)
🏢 Capgemini
📍 Ciudad de México