评测通知

当前，基于知识的人工智能产品在应用过程中尚存在自动化程度待提高、知识构建质量需把控、知识维护耗时耗力等问题。为引导产业持续发展，中国信息通信研究院（以下简称“中国信通院”）依托中国人工智能产业发展联盟（以下简称“联盟”）联合业界30余家企业共同构建了基于知识的人工智能技术及产品标准评测体系，针对知识构建、知识管理、知识应用等建立了多维度评价指标，已为多家企业提供知识计算能力评测。为进一步促进技术水平提升、帮助用户方选型产品，中国信通院正式启动知识计算第三轮评测。

1. 评测对象

本评测面向知识图谱、智能知识库、企业知识管理、基于知识的搜索、推荐、问答等相关产品及应用。

2. 评测项目

1）知识构建类

评测标准：《基于知识的人工智能系列及产品评估方法 第1部分：知识构建与管理》

评测内容：包括数据处理、知识构建、知识管理3个能力域，共计11个能力项、140余项指标。

2）知识应用类

评测标准：《基于知识的人工智能系列及产品评估方法 第2部分：知识计算与应用》

评测内容：包括计算推理、知识应用2个能力域，共计8个能力项、120余项指标。

3）知识管理类

评测标准：《基于知识的人工智能系列及产品评估方法 第3部分：企业知识管理》

评测内容：包括知识生产、知识共享、智能应用3个能力域，共计12个能力项、130余项指标。

3. 评测类型

本评测面向产品方、应用方提供全域能力和专项能力两类评测。全域能力评测包括知识构建类、知识应用类、知识管理类三个评测项目，综合考察参测产品在功能指标和性能指标的符合情况进行评级；专项能力参测方可根据具体情况选择各评测项目下的细分能力项进行评测。

1.评测申请确认

双方沟通评测意向，企业提交评测申请表。

2.签订商务合同

企业确认评测意向，并进行商务合同确认与签订。

3.准备评测环境

确定评测时间后，向参评企业提供明确的测试用例，供参评企业进行内部评估及评测环境准备。

4.实施评估测试

测试人员现场或远程实施，期间内通过人员访谈、资料审查和参评企业人员演示的方式完成评测。

5.组织专家评审

评测周期结束后，召开专家评审组会议，对完成评测的企业、测试报告及评测结果进行评审。

6.颁发证书报告

评测证书和报告将在公开会议上进行颁发。

1.评测报名：即日起开始

2.评测执行：2023年2月至2023年7月底

3.专家评审：2023年8月

4.证书颁发：2023年8月底可信AI成果发布会（拟）

张老师，19852822678，

zhangdan3@caict.ac.cn

陶老师, 15150591515，

taoyue@caict.ac.cn