登录通行证
欢迎注册帐户
欢迎找回帐户

评测新闻

返回 新闻详情

评测新闻

关于启动首批基于大模型的智能应用评估并召开标准宣贯会的通知

发布时间:2024-03-25

作者:中国信通院

近年来,大模型技术持续走深向实,随着语言、视觉、语音、多模态等各类大模型能力的不断迭代升级,模型应用范围持续扩大,逐步形成人工智能技术发展新格局和应用新生态。大模型在识别、理解、决策、生成等任务中具备泛化性与通用性,有望成为人工智能应用的基础底座,解决人工智能应用落地所面临的需求碎片化、多样化等问题。当前,大模型已赋能智能推荐、智能检索、智能助手、智能客服、知识管理、数据分析等应用,为人工智能应用的落地提供了新的范式和思路。如在智能推荐系统中,大模型可基于用户行为进行分析和预测,实现精准个性化推荐;在智能助手中,大模型可有效提升产品语义理解、图文生成、对话交互等能力。

为了推动大模型与人工智能应用的融合发展,促进大模型在智能推荐、智能检索、智能助手、智能客服、知识管理、文档处理、数据分析等人工智能应用中的创新实践,中国信息通信研究院(以下简称“中国信通院”)人工智能研究中心结合《大规模预训练模型技术和应用评估方法》《自然语言处理技术及产品评估方法》《基于知识的人工智能技术及产品评估方法》等系列标准研究基础,形成了基于大模型的智能应用系列评估方法。为推动大模型与智能应用的深度融合,现正式启动首批基于大模型的智能应用评估工作,欢迎各方单位咨询参与。

3.png

图1 基于大模型的智能应用评估体系

评估范围

1、大模型+知识管理:面向基于大模型的知识图谱、知识库、知识管理相关产品及应用,评估大模型在知识构建、知识计算、知识应用等方面的应用效果;

2、大模型+智能对话:面向基于大模型的智能对话相关产品及应用,评估大模型在对话类型、对话功能、对话性能、对话体验等方面的应用效果;

3、大模型+智能客服:面向基于大模型的智能客服相关产品及应用,评估大模型在文本客服、语音客服、视频客服等方面的应用效果;

4、大模型+智能文档处理:面向智能文档处理系统、智能文档处理平台、文档智能审阅系统、智能文档分析平台等产品及应用,评估大模型在文档信息抽取、文档生成、文档对比、文档审核等方面的应用效果;

5、大模型+智能助手:面向基于大模型的智能助手相关产品及应用,评估大模型在对话、决策、推理、创作等多模态任务上的应用效果;

6、大模型+智能检索:面向基于大模型的智能检索相关产品及应用,评估大模型在检索效果、检索优化、检索策略等方面的应用效果;

7、大模型+智能推荐:面向基于大模型的智能推荐相关产品及应用,从用户侧和平台侧综合评估大模型在推荐准确性、推荐实时性、推荐多样性等方面的应用效果;

8、大模型+生成式BI面向基于大模型的生成式BI相关产品及应用,评估大模型在文本生成、结构化数据生成、数据分析能力等方面的应用效果。

图片

为进一步宣贯基于大模型的智能应用标准体系,推动基于大模型的人工智能应用落地。中国信通院拟于2月23日下午召开基于大模型的智能应用评估宣贯会,会上将详细解读基于大模型的智能应用标准体系,现诚挚邀请各相关单位及专家参会。

会议形式:腾讯会议

会议链接:

https://meeting.tencent.com/dm/Uj7rAVRvi4NN

会议时间:2024年2月23日(周五)14:00-16:00

会议密码:请扫描下方二维码报名获取(已报名的单位无需再次报名)

4.png

评估联系人

张老师,19852822678(微信同号)

zhangdan3@caict.ac.cn

陶老师,18951766189(微信同号)

taoqiuyu@caict.ac.cn

陶老师,15150591515(微信同号)

taoyue@caict.ac.cn

王老师,15651728035(微信同号)

wangqianna@caict.ac.cn