中国移动发布通用大模型评测标准,十余家央企及产业各方参编

中国移动宣布携手央企及产业各方共同发布《通用大模型评测标准》。

根据介绍,中国移动联合电子标准院及16家重点央企共同开展大模型评测体系建设工作,第一阶段将围绕通用领域和4个重点行业领域,从评测标准制定、评测基地建设、评测试点应用等方面开展工作,目前初步完成通用大模型评测标准制定。

通用大模型评测标准基于“2-4-6”框架。“2”代表两类评测视角,以重点行业实际使用需求为导向,与国标对模型能力要求拉齐,将评测任务划分为理解和生成两类视角。“4”代表四类评测要素,从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素,确保评测工作可实施性。“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准广泛吸纳产学研用各方意见,并结合行业特色场景需求,可为通用大模型全面评估提供客观依据,为AI赋能千行百业提供保障。

电子标准院、中国电信、国家电网、中国石油、中国物流、南方电网、阿里、科大讯飞、智谱等均为此次通用大模型评测标准的联合编制单位。

未经允许不得转载:岩猫星空网 » 中国移动发布通用大模型评测标准,十余家央企及产业各方参编