Evaluación de traducción automática basada en datos para lograr la excelencia multilingüe
Una agencia oficial de la Unión Europea con alcance internacional.
La organización desarrolla modelos de traducción automática para distintas combinaciones lingüísticas en los 23 idiomas oficiales de la UE y realiza evaluaciones lingüísticas profesionales que permiten obtener una visión más precisa de la calidad alcanzada mediante la personalización de los modelos.
-
Objetivo
Evaluar la calidad de modelos personalizados de traducción automática mediante evaluaciones humanas sistemáticas realizadas por lingüistas profesionales, proporcionando al cliente una visión integral y basada en datos del rendimiento de la TA en distintas combinaciones lingüísticas europeas.
-
Reto
El proyecto requería la evaluación por segmentos de resultados de TA, utilizando una escala de calificación de cuatro puntos en la que 2-3 lingüistas con un nivel mínimo de C2 en ambos idiomas evaluaban cada documento de forma independiente.
Los documentos tenían una extensión media de aproximadamente 5.000 palabras, por lo que cada análisis suponía la evaluación de unas 15.000 palabras en total.
Con una media de 6 proyectos al mes, el volumen total del proyecto excedía de 5,32 millones de palabras.
También se precisaba un entorno específico para ofrecer las herramientas de evaluación necesarias y resultados en tiempo real. -
Implementación
Seprotec implementó un sistema de evaluación humana de la TA mediante la plataforma ContentQuo, adaptado a los requisitos específicos del cliente en cuanto a los criterios de evaluación y la presentación de informes.
El equipo de lingüistas y gestores de proyectos recibió formación específica.
Cuando el cliente carga un documento, un coordinador de Seprotec comprueba los ajustes y lo asigna a los tres lingüistas más competentes, que se encargan de evaluar cada segmento en un entorno específico.
Seprotec verifica los resultados y los presenta en un panel de control que permite consultar el rendimiento global, la evolución de la calidad y los resultados desglosados por combinación lingüística, con la posibilidad de descargar los informes en formato .csv. -
Resultado
La solución permitió reducir el tiempo necesario para poner en marcha las evaluaciones y disminuir de forma significativa la carga administrativa del cliente, gracias a la gestión por parte de Seprotec de la asignación y coordinación de lingüistas.
El cliente dispone de acceso en tiempo real a los resultados de las evaluaciones y a análisis continuos basados en datos, realizados por lingüistas profesionales, lo que permite validar y optimizar el rendimiento de la TA en 23 idiomas.
El entorno tecnológico a medida también ofrece transmisión de datos segura y encriptada, así como acceso a un equipo de lingüistas nativos especializados y asistencia en la gestión de proyectos profesional.