2023“弈衡”通用大模型评测体系白皮书
2023-08-13
1215次下载
导读：该白皮书是行业中首个大模型评测领域白皮书，基于客观全面、公平公正和用户视角的三大原则，创新性地提出了“2-4-6”的“弈衡”通用大模型评测体系。
该体系将评估场景划分为基础任务和应用任务，明确四项主要评测要素，并制定涵盖六大维度的50余个评测指标。
“弈衡”评测体系可对国内外大模型开展有效评测分析，充分揭示大模型在应用中的固有问题，客观反映各模型在准确性、可靠性以及安全性等方面的差异，为大模型的评测实践和产业应用提供指导。
该体系将评估场景划分为基础任务和应用任务，明确四项主要评测要素，并制定涵盖六大维度的50余个评测指标。
“弈衡”评测体系可对国内外大模型开展有效评测分析，充分揭示大模型在应用中的固有问题，客观反映各模型在准确性、可靠性以及安全性等方面的差异，为大模型的评测实践和产业应用提供指导。
免费阅读6页，下载阅读完整文档.
立即下载
免责声明：
来源： 中国移动研究院，数智观察推荐阅读，版权归作者所有。文章内容仅代表作者独立观点，不代表数知观察立场，转载目的在于传递更多信息。如涉及作品版权问题，请联系我们删除或做相关处理！