Valutazione della traduzione automatica basata sui dati per l'eccellenza multilingue
Un'agenzia ufficiale dell'Unione europea con portata globale.
L'organizzazione sviluppa modelli di traduzione automatica per più combinazioni linguistiche che coinvolgono le 23 lingue ufficiali dell'UE e si avvale di valutazioni linguistiche professionali per comprendere meglio la qualità ottenuta grazie alla personalizzazione dei modelli.
-
Obiettivo
Adottare un approccio sistematico per valutare la qualità di modelli di traduzione automatica personalizzati attraverso una valutazione umana condotta da linguisti professionisti, offrendo al cliente una panoramica completa e basata sui dati delle prestazioni della traduzione automatica in molteplici combinazioni linguistiche dell'Unione europea.
-
Sfida
Il progetto ha richiesto una valutazione a livello di segmento dell'output di traduzione automatica utilizzando una scala di valutazione a quattro punti, con ciascun documento valutato in modo indipendente da 2-3 linguisti con una padronanza di livello almeno C2 in entrambe le lingue.
I documenti avevano una lunghezza media di circa 5.000 parole, e ciascuna analisi rappresentava circa 15.000 parole valutate.
Con una media di 6 incarichi al mese, la portata complessiva del progetto ha superato i 5,32 milioni di parole.
È stato inoltre richiesto un ambiente dedicato per fornire gli strumenti di valutazione necessari e i risultati in tempo reale. -
Implementazione
Seprotec ha implementato la valutazione umana della traduzione automatica all'interno della piattaforma ContentQuo, personalizzata in base ai requisiti di valutazione e rendicontazione del cliente.
I linguisti e i project manager hanno ricevuto una formazione dedicata.
Una volta che il cliente carica un documento, un coordinatore di Seprotec verifica le impostazioni e lo assegna ai tre linguisti più idonei, i quali valutano ciascun segmento in un ambiente dedicato.
I risultati vengono verificati da Seprotec e resi disponibili tramite una dashboard che mostra le prestazioni generali, l'evoluzione della qualità e i risultati per combinazione linguistica, con report scaricabili in formato .csv/.xls. -
Risultato
La soluzione ha abbreviato i tempi necessari per avviare le valutazioni e ridotto significativamente il carico di lavoro amministrativo del cliente, affidando a Seprotec la gestione dell'assegnazione e del coordinamento dei linguisti.
Il cliente ha così accesso in tempo reale ai risultati delle valutazioni e a un'analisi continua basata sui dati, condotta da linguisti professionisti per convalidare e migliorare l'output della traduzione automatica in 23 lingue.
L'ambiente tecnologico su misura offre inoltre una trasmissione dei dati sicura e crittografata, oltre all'accesso a linguisti madrelingua specializzati e a un supporto di project management professionale.