25 ago
|
Capgemini
|
Ciudad de México
25 ago
Capgemini
Ciudad de México
Reclutador: David Reyes
Posición: Automation Tester IA
Ubicación: CDMX
Industria: Insurance
Modalidad de trabajo: Remoto
Tus funciones:
- Tester de Automatización altamente capacitado para asegurar la calidad de aplicaciones y soluciones basadas en Inteligencia Artificial (IA), Machine Learning (ML) e IA Generativa. Será responsable de diseñar, desarrollar y ejecutar estrategias de pruebas automatizadas que garanticen la funcionalidad, confiabilidad, rendimiento y calidad de modelos de IA y aplicaciones inteligentes.
- El candidato ideal deberá contar con experiencia en pruebas de software tradicionales, así como conocimientos en validación de modelos de IA, pruebas de aplicaciones basadas en Large Language Models (LLMs), chatbots, asistentes virtuales y soluciones de IA Generativ
- Automatización de Pruebas
- Diseñar, desarrollar y mantener frameworks de automatización de pruebas.
- Crear y ejecutar pruebas funcionales, de integración, regresión, API y end-to-end.
- Automatizar pruebas para aplicaciones web, móviles y soluciones empresariales.
- Integrar pruebas automatizadas dentro de pipelines CI/CD.
- Monitorear y mejorar la cobertura de pruebas automatizadas.
- Pruebas de Inteligencia Artificial
- Validar modelos de Machine Learning y soluciones de IA Generativa.
- Diseñar casos de prueba para evaluar precisión, consistencia y relevancia de respuestas generadas por IA.
- Ejecutar pruebas de prompts y regresión de prompts.
- Identificar y documentar alucinaciones, sesgos, respuestas inconsistentes y comportamientos inesperados.
- Validar soluciones basadas en LLMs, RAG (Retrieval Augmented Generation), agentes inteligentes y chatbots.
- Evaluar la calidad de datos utilizados para entrenamiento e inferencia.
- Apoyar en la validación de modelos antes de su liberación a producción.
- Aseguramiento de Calidad
- Elaborar planes de prueba, casos de prueba y reportes de ejecución.
- Gestionar defectos durante todo el ciclo de vida del desarrollo.
- Participar en revisiones de requerimientos y diseño funcional.
- Colaborar con equipos de desarrollo, científicos de datos, MLOps, Product Owners y analistas de negocio.
- Garantizar el cumplimiento de estándares y mejores prácticas de calidad.
- Pruebas de Rendimiento y Seguridad
- Ejecutar pruebas de rendimiento sobre aplicaciones y APIs.
- Validar tiempos de respuesta, escalabilidad y estabilidad de soluciones basadas en IA.
- Colaborar en actividades de pruebas de seguridad y vulnerabilidades.
Conocimientos y experiencia necesaria:
- Licenciatura o Ingeniería en Sistemas, Informática, Computación, Tecnologías de la Información o afín.
- Experiencia
- Más de 3 años de experiencia en pruebas de software y automatización.
- Mínimo 2 años participando en proyectos de Inteligencia Artificial, Machine Learning o IA Generativa.
- Experiencia trabajando bajo metodologías ágiles (Scrum, Kanban).
- Conocimientos Técnicos
- Automatización y QA
- Selenium
- Playwright
- Cypress
- Robot Framework
- Appium
- Postman
- Rest Assured
- Swagger/OpenAPI
- Lenguajes de Programación
- Python
- Java
- JavaScript / TypeScript
- DevOps y Control de Versiones
- Azure DevOps
- GitHub Actions
- Jenkins
- Git
- Inteligencia Artificial
- Comprensión del ciclo de vida de Machine Learning.
- Experiencia validando:
- Modelos de Machine Learning
- LLMs (Large Language Models)
- Chatbots
- Copilots
- Soluciones RAG
- IA Generativa
- Agentes de IA
- Métricas de Evaluación de IA
- Exactitud (Accuracy)
- Precisión (Precision)
- Recall
- F1 Score
- Relevancia de respuestas
- Detección de alucinaciones
- Evaluación de consistencia de respuestas
- Plataformas Cloud
- Microsoft Azure (preferente)
- AWS
- Google Cloud Platform
- Competencias Deseables
- Certificación ISTQB.
- Conocimientos de MLOps.
- Experiencia con Azure OpenAI Service.
- Experiencia con Azure AI Foundry, Azure Machine Learning o Databricks.
- Conocimientos de Responsible AI, Explainable AI y Fairness.
- Experiencia utilizando herramientas de evaluación de IA como:
- Promptfoo
- DeepEval
- OpenAI Evals
- LangSmith
- Habilidades Blandas
- Pensamiento analítico y orientación a resultados.
- Atención al detalle.
- Capacidad para resolver problemas complejos.
- Excelente comunicación oral y escrita.
- Trabajo cooperativo con equipos multidisciplinarios.
- Proactividad y aprendizaje continuo.
- Adaptabilidad a tecnologías emergentes.
- Indicadores de Éxito
- Incremento de la cobertura de automatización.
- Reducción de defectos en producción.
- Mejora en la calidad y confiabilidad de soluciones de IA.
- Reducción del tiempo de ejecución de pruebas.
- Cumplimiento de métricas de calidad establecidas para los modelos de IA.
- Identificación temprana de riesgos, sesgos y comportamientos inesperados en aplicaciones inteligentes.
- Modalidad Recomendada
- Híbrida o Remota.
- Nivel: Semi Senior / Senior.
- Inglés intermedio-avanzado (deseable para proyectos globales).
- Perfil ideal: Profesional de QA Automation con sólidos conocimientos técnicos y experiencia en validación de soluciones de Inteligencia Artificial, capaz de garantizar la calidad de aplicaciones innovadoras basadas en IA Generativa y Machine Learning dentro de entornos empresariales.
Habilidades:
Trabajo bajo presión, calidad en el trabajo y orientado a resultados
Tu carrera en Capgemini
- Al trabajar en un ambiente de equipo, nuestros consultores se enfocan en el análisis, diseño y desarrollo de soluciones basadas en tecnología para los clientes de Capgemini.
- Trabajarás en conjunto con especialistas funcionales, técnicos y del negocio para ayudar a desarrollar la implementación e integración de soluciones y sistemas innovadores incluyendo metodologías, técnicas y herramientas.
- Contribuirás de una manera responsable y oportuna con la satisfacción del cliente proporcionando servicios y productos que generan valor agregado.
- Capgemini ofrece una compensación competitiva y beneficios superiores a los de Ley.
- Nuestras oficinas centrales están en París, Francia y tenemos presencia en más de 50 países. Somos más de 340 mil profesionales en México, ubicados en Ciudad de México, Aguascalientes y Monterrey.
- Capgemini ha desarrollado metodologías propias a nivel global: Collaborative Business Experience y Rightshore.
Te encantará trabajar en Capgemini porque:
- Ofrecemos una experiencia única de reclutamiento y onboarding, y te ayudamos a construir las bases de tu carrera y habilidades profesionales.
- Proveemos un ambiente de trabajo colaborativo basado en nuestros 7 valores: Honestidad, Audacia, Confianza, Libertad, Espíritu de Equipo, Modestia y Diversión.
- Promovemos un ambiente que te permite planear y desarrollar tu carrera.
“En Capgemini México, el objetivo es atraer al mejor talento y lograr un ambiente laboral diverso e inclusivo por lo que no se discrimina por motivo de raza, sexo, orientación sexual, identidad o expresión de género o cualquier otra característica propia de la persona. Todas las solicitudes son bienvenidas y serán consideradas para concurso con base en el mérito del candidato contra el trabajo y/o la experiencia para el puesto. Por motivos de validación, usaremos de manera segura tus datos incluyendo pero no limitado a tu imagen en video o screenshots durante los procesos de selección, contratación y/o On boarding , para tu seguridad, puedes revisar nuestro aviso de privacidad en: https://www.capgemini.com/mx-es/aviso-de-privacidad-para-candidatos-a-ocupar-una-vacante/
📌 Automation Tester IA (Ciudad de México)
🏢 Capgemini
📍 Ciudad de México