4V都考不过

要点:最新基准数据集MMMUs针对大学水平多学科问题提供了全面的多模态AI测试，挑战了当前最强大的GPT-4V等模型，展现了其在深度和广度方面的性能。MMMU包含六个学科的30个科目，涉及艺术与设计、商科、科学、健康与医学、人文与社会科学、技术与工程等领域，共有1.15万个多模态问题，考察了感知、知识和推理等基本技能，为评估专家级AGI提供了全面而复杂的任务。