а как может быть качество когда идёт перевод между неясными языками и темболее через третий неясный - человеческий то прямой перевод считается попыткой перевода ... у deepl был признак но показалось
Возможно, не до конца понял вопрос, но если речь идет о том, что конкретный человеческий перевод тоже может быть не идеальным, то метрики иногда усредняют по нескольким переводам
Оценка оценщика: как оценить метрику качества машинного перевода