Все сравнения

Llama 4 Maverick vs YandexGPT 5 Pro — сравнение бенчмарков

Llama 4 Maverick

Llama 4 Maverick опережает YandexGPT 5 Pro по международным бенчмаркам. YandexGPT 5 Pro выигрывает в русском языке, понимании российского контекста и интеграции с Яндексом.

Бенчмарки

MMLU (EN)
Llama
88.2
YandexGPT
78.4
HumanEval
Llama
82.4
YandexGPT
71.2
Русский язык (ruMMLU)
Llama
79.3
YandexGPT
88.1
Arena Elo
Llama
1287
YandexGPT
1198
Средний балл: Llama 384.2vsYandexGPT 358.9

* Бенчмарки — стандартизированные тесты для оценки качества ИИ-моделей. Чем выше балл, тем лучше модель справляется с задачей.

Вопросы и ответы

+
+
+
+