HF blog·· 13 天前AI 评分44
MiniMax-H3 能否推理物理世界?全模态生成模型评测
Paper page - Can MiniMax-H3 Reason About the Physical World? An Evaluation of Omni-Modal Generative Model
AI 导读
针对 MiniMax-H3 这类全模态生成模型,一项新评测考察其物理世界推理能力,在 517 个评测实例中整体成功率为 41.97%。其中基于视频的决策推理成功率最高,为 56.00%,基于音频的消歧推理最弱,仅 27.40%。评测设计了隐式提示配多帧、音频-图像、前缀视频和音视频四类任务,要求模型跨模态整合互补信息以推断潜在事件状态与未来动态。
来源:HF blog · huggingface.co