联盟动态

News & Events

提质赋能,抗疫争先,持续通过规范和测试促进产品能力提升

Jun 29, 2020

2020年上半年,突如其来的新型冠状病毒肺炎疫情给全社会的生产生活带来了巨大影响。疫情给人工智能企业在生产研发、销售交付、投资融资等环境造成了较大的影响,但也催生了大量无人化、自动化、智能化需求,如疫情大数据分析、智能测温、医疗影像辅助诊断、无人系统应用(如无人机、机器人巡检、无人配送和消杀等)产品和服务已经在疫情防控发挥了重要的作用。

疫情期间,中国人工智能产业发展联盟(以下简称“AIIA”或“联盟”)评估组坚持“以规范树立标杆、以评测提升能力”的宗旨,一方面支持工信部等相关部委开展了大量抗疫产品的规范制定和评估评测工作,另一方面,继续推动已有规范的修定和完善,并根据产业发展启动了多项重点工作。

一、全面支撑工信部人工智能抗疫产品的评估评测

为进一步了解各类智能化抗疫产品的实际能力,帮助业界甄选真正具有实力的智能化抗疫产品,联盟评估组一方面在工业和信息化部的指导下启动了AI人体测温系统、肺炎影像识别、疫情防控机器人三类产品的测试工作。工作启动之后得到了业界企业的热烈响应,超百家企业参与规范制修订。在相关规范定稿之后,于4月27日正式启动测试工作。经过现场测试、结果整理、专家评审等环节,近期将正式发布AI人体测温系统、肺炎影像识别、疫情防控机器人三类抗疫产品的评测结果。

另一方面,联盟评估组开展了针对疫情宣传、人群调研、防疫问答下使用的智能外呼和在线客服类产品或服务的评估测试工作,通过技术测试、材料审查和企业披露等方式对参测产品的基础功能、业务能力和服务性能等指标进行评测。目前首轮智能外呼类和在线客服类的首轮评测结果已经对外公布,共有三十余家企业的四十款产品参加了测试。

二、启动机器人流程自动化(RPA)、智能化终端等多个规范制定工作

机器人流程自动化(Robotic Process Automation,RPA)凭借其在成本控制和效率提升等方面的优势,迅速在会计业、银行业、制造业等多个领域广泛落地应用。为引导国内RPA产业健康发展,为用户选择产品提供可信参考,营造良好的市场环境,中国信息通信研究院(以下简称“中国信通院”)联合RPA中国、金智维、来也科技、华为、达观数据、艺赛旗等国内RPA头部企业和组织,在联盟评估组开展了RPA系列评估规范的制定工作。当前RPA系列规范《机器人流程自动化评估规范 第1部分:产品能力测试指标及评估方法》正在火热修改完善中,预计将于7月底正式定稿并同步启动评估评测工作,首轮评估结果将于AIIA2020开发者大会正式发布。

以智能语音语义、计算机视觉为基础的智能化终端产品,如家用/企业级智慧大屏、无人机器人、智能音箱、智能助手等产品,已经成为智能技术进入消费客户的重要渠道。中国信通院联合华为、中兴、移动杭研等企业,已经开展了智能服务机器人、家用/企业级智慧大屏、智能翻译机、车载智能语音助手等产品的评估规范制定。

三、完成自然语言处理、智能语音、增强现实等多个评估规范

自然语言处理(NLP)被誉为人工智能“皇冠上的明珠”,基于NLP技术的智能客服、机器翻译、对话系统等产品已经得到了广泛的使用。特别是以对话为核心技术的智能客服如雨后春笋般涌现,与人们的日常生活建立起千丝万缕的联系。为满足行业需求方和供给方对NLP相关产品功能和性能的精细化评估需求,中国信通院、南京新一代人工智能研究院联合腾讯、百度、思必驰等客服企业,已经完成了智能客服系列(功能、性能、语音客服、文本客服、智能质检),NLP产品和平台系列(对话系统、机器翻译、NLP服务平台)多个评估规范。

智能语音技术逐步成熟并不断赋能于各类场景,成为人机交互的主要信息入口。智能语音以基础服务为核心,通过技术、服务和硬件一体化,正在从多个维度提升智能语音的产品化应用和用户体验。基于智能语音产业发展的实际情况和需求,评估组在腾讯、思必驰、好未来、得意音通、科大讯飞等企业的支持下,已经完成制定了语音识别、声纹识别、语音采集质量、全双工交互、口语评测、智能车载语音等多个评估规范,其中部分已展开实际的评估测试工作。

增强现实(Augmented Reality,AR)技术的快速发展,满足了人工智能对虚拟转化为现实的新需求,让各类智能终端拥有用视觉理解环境的能力,为产品推广应用提供更加便利的服务交互手段。评估组在视辰科技、易现EZXR、中国联通等单位的支持下,完成了《AR(增强现实)应用服务平台评估规范》。

表1 上半年完成规范

序号

规范名称

1

智能客服系统服务等级评估方法 第1部分:功能

2

智能客服系统服务等级评估方法 第2部分:性能

3

智能客服系统服务等级评估方法 第3部分:语音客服

4

智能客服系统服务等级评估方法 第4部分:文本客服

5

智能客服系统服务等级评估方法 第5部分:智能质检

6

自然语言处理技术与产品评估方法 第1部分:服务平台 AIIA/CCSA

7

自然语言处理技术与产品评估方法 第2部分:智能对话 AIIA/CCSA

8

自然语言处理技术与产品评估方法 第3部分:智能翻译机 AIIA/CCSA

9

自然语言处理技术与产品评估方法 第4部分:机器同传 AIIA/CCSA

10

自然语言处理技术与产品评估方法 第5部分:智能客服 AIIA/CCSA

11

中文语音识别基础服务指标要求和评估方法

12

OCR智能化分级评估规范

13

AR(增强现实)应用服务平台评估规范

14

人工智能产品智能化等级指标要求和评估方法 第5部分:车载语音助手

四、继续开展第三轮人工智能重点应用和产品能力评测

2018年以来,联盟评估组陆续启动了人工智能重点应用和产品能力评测,涵盖了人工智能芯片、开源框架、深度学习平台、智能客服、家用级/企业级人脸摄像机、中文语音合成、机器翻译、内容评测等。

目前正在开展的第三轮评测将在前期评测的基础上,新增智能OCR、语音识别、智能客服、智能对话、NLP服务平台、RPA产品能力、机器学习平台等评估专项。欢迎各单位咨询业务或参与测试,如有评测或对标需求可与联盟相关负责人联系。

表2 第三轮人工智能重点应用和产品能力评测项目

序号

评测类型

1

语音客服:功能/性能评估

2

文本客服:功能/性能评估

3

智能对话产品:功能/性能评估

4

机器翻译产品:功能/性能

5

NLP服务平台:功能/性能

6

OCR平台智能化分级

7

语音识别基础服务

8

语音合成基础服务

9

深度学习训练平台功能可信评估

10

智能音箱智能化分级评估:带屏/不带屏

 

评测相关负责人联系方式:

http://aiiaorg.cn/index.php?m=content&c=index&a=show&catid=34&id=58 

关键词: 评估 人工智能 疫情 评测

访问人数:4122
咨询电话
010-68094158
邮箱
jiahao@aiiaorg.cn
返回顶部