La ciencia detrás de la calidad de traducción de DeepL

La calidad de la traducción de texto es difícil de medir y fácil de manipular. Este documento técnico explica cómo DeepL evalúa la calidad mediante juicio humano comparativo a ciegas, por qué métricas establecidas como BLEU y COMET se quedan cortas, y qué prueba realmente nuestra metodología de evaluación comparativa.

A whitepaper titled "How DeepL evaluates translation quality". The whitepaper is branded with the DeepL logo.

Qué incluye el informe técnico

  • Los límites de BLEU y COMET— por qué las puntuaciones orientadas a la fluidez pasan por alto los errores que más importan en producción
  • Metodología de evaluación comparativa a ciegas de DeepL— cómo DeepL diseña pruebas para eliminar el sesgo de marca, posición y familiaridad
  • Cómo se calculan las tasas de victorias— el modelo de comparación por pares que produce clasificaciones de calidad
  • Límites honestos del enfoque— lo que los benchmarks te dicen y lo que no

Descargue el documento técnico

Por favor, proporciona el texto completo que deseas traducir.Cómo evalúa DeepL la calidad de las traducciones,para obtener más información sobre la metodología.