DeepL

Die Wissenschaft hinter DeepLs Übersetzungsqualität

Textübersetzungsqualität ist schwer zu messen und leicht zu manipulieren. Dieses Whitepaper erklärt, wie DeepL Qualität mithilfe von blindem vergleichendem menschlichem Urteil bewertet, warum etablierte Metriken wie BLEU und COMET unzureichend sind und was unsere Benchmarking-Methodik tatsächlich testet.

Ein Whitepaper mit dem Titel „Wie DeepL die Übersetzungsqualität bewertet“. Das Whitepaper ist mit dem DeepL-Logo versehen.

Was steht im Whitepaper?

  • Die Grenzen von BLEU und COMET— warum flüssigkeitsorientierte Bewertungen die Fehler übersehen, die in der Produktion am wichtigsten sind
  • DeepL's blinde vergleichende Evaluierungsmethodik— wie DeepL Tests entwirft, um Marken-, Positions- und Vertrautheitsbias zu eliminieren
  • Wie Gewinnraten berechnet werden— das paarweise Vergleichsmodell, das Qualitätsrankings erstellt
  • Ehrliche Grenzen des Ansatzes— was Benchmarks verraten und was nicht

Whitepaper herunterladen

Holen Sie sich Ihr Exemplar vonWie DeepL die Übersetzungsqualität bewertet,um mehr über die Methodik zu erfahren.