DeepL

Die Wissenschaft hinter DeepLs Übersetzungsqualität

Textübersetzungsqualität ist schwer zu messen und leicht zu manipulieren. Dieses Whitepaper erklärt, wie DeepL Qualität mithilfe von blindem vergleichendem menschlichem Urteil bewertet, warum etablierte Metriken wie BLEU und COMET unzureichend sind und was unsere Benchmarking-Methodik tatsächlich testet.

A whitepaper titled "How DeepL evaluates translation quality". The whitepaper is branded with the DeepL logo.

Was steht im Whitepaper?

  • Die Grenzen von BLEU und COMET— warum flüssigkeitsorientierte Bewertungen die Fehler übersehen, die in der Produktion am wichtigsten sind
  • DeepL's blinde vergleichende Evaluierungsmethodik— wie DeepL Tests entwirft, um Marken-, Positions- und Vertrautheitsbias zu eliminieren
  • Wie Gewinnraten berechnet werden— das paarweise Vergleichsmodell, das Qualitätsrankings erstellt
  • Ehrliche Grenzen des Ansatzes— was Benchmarks verraten und was nicht

Whitepaper herunterladen

Holen Sie sich Ihr Exemplar vonWie DeepL die Übersetzungsqualität bewertet,um mehr über die Methodik zu erfahren.