GenAI/ML Evaluation Engineer — Mexico City Metropolitan Area

Empresa: Centraprise

Ingeniero para construir framework de evaluación automatizada y regresión para servicio de reescritura/sanitización de PII, incluyendo datasets dorados, pipelines de datos y métricas de calidad.

Experiencia requerida

3–8 años

Responsabilidades

Construir y mantener datasets dorados; desarrollar pipelines en Python para extraer y procesar datos de Google Docs, Sheets, Slides, Gmail, Calendar, Chat, PDF y Office; diseñar esquemas/protobufs; construir frameworks de evaluación automatizada y regresión; implementar métricas de precisión, recall, exactitud a nivel de entidad y mención, y consistencia de reescritura; desarrollar reportes automatizados y detección de regresiones; soportar evaluación multilingüe; usar GenAI/LLMs para evaluación y análisis de errores; integrar frameworks con CI.

Conocimientos técnicos

Python, C++, Java o Go; experiencia en pipelines de datos y pruebas automatizadas; NLP, ML, GenAI o LLM; métricas de precisión y recall; APIs, protobufs y grandes datasets.

Habilidades

Depuración, análisis de datos y resolución de problemas.