По итогам международного независимого бенчмарка DiBiMT «Яндекс Переводчик» стал лучшим среди других языковых моделей и онлайн-переводчиков в категории перевода текста с английского на русский язык. Переводчик от «Яндекса» обошел по этому переводу DeepL и Google Translate. Также сервис занял третье место по качеству перевода с английского на китайский, немецкий, итальянский и испанский языки. Тест показал, что «Переводчик» лучше других сервисов определяет значение конкретных английских слов в предложениях и допускает меньшее количество семантических ошибок. По качеству перевода с английского на китайский лидирует Google Translate, с английского на немецкий, итальянский, испанский — DeepL. Всего в рейтинге представлено 8 сервисов — «Яндекс Переводчик», Google Translate, DeepL, OPUS, MBart50, MBart50MTM, M2M100LG, M2M100.