功能介绍

关于 CMMLU

CMMLU是一个综合性的中文评估基准，专门用于评估语言模型在中文语境下的知识和推理能力。CMMLU涵盖了从基础学科到高级专业水平的67个主题。它包括：需要计算和推理的自然科学，需要知识的人文科学和社会科学,以及需要生活常识的中国驾驶规则等。此外，CMMLU中的许多任务具有中国特定的答案，可能在其他地区或语言中并不普遍适用。因此是一个完全中国化的中文测试基准。

CMMLU数据集采用Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.

Note：自2023-12-16日起，对于未开放公测的API模型，我们将验证 1.模型是否有基本的指令跟随能力；2.是否存在数据污染，通过验证的模型会被更新在榜单。

特别说明

本站AI工具导航提供的「CMMLU」来源于网络，不保证外部链接的准确性和完整性，同时，对于该外部链接的指向，不由本站实际控制，在2026-07-04收录时，该网页上的内容，都属于合规合法，后期网页的内容如出现违规，可以直接联系网站管理员进行删除，本站不承担任何责任。

AI工具导航致力于优质、实用的AI网站资源收集与分享！