Может ли MiniMax-H3 рассуждать о физическом мире?
Независимая оценка на 517 примерах физического и мирового рассуждения MiniMax-H3 в омни-модальном режиме (текст/изображение/видео/аудио), где каждая модальность несёт лишь частичные свидетельства о событии. Общий уровень успеха 41,97%: лучше всего на рассуждении по видео при принятии решений (56,0%), хуже всего на аудио-дизамбигуации (27,4%).
Почему это важно
Первая систематическая проверка того, транслируется ли унифицированная аудио-визуальная генерация в заземлённое рассуждение (114 апвотов на HF Daily), и пока ответ — в основном нет.
Важность: 3/5
Заметная eval-статья, 114 апвотов на HF Daily Papers
Источники
официальный
Can MiniMax-H3 Reason About the Physical World?