联盟动态

News & Events

TTS-4S评测体系拟上线——中文语音合成服务系统评估规范第二次研讨会在京顺利召开

Apr 25, 2019

智能客服、机器人、有声阅读、语音导航……

再好的效果,没有TTS(语音合成服务系统)也出不来

 图片1.png

据不完全统计,国内涉及中文语音合成服务系统的企业已经超过五十家,为各种应用场景提供语音合成服务,语音合成已经成为产业界智能语音交互的刚需,语音合成评测自然作为推动产业发展的动力。目前业界内普遍所采用的是MOS(主观意见平均分)的方法来进行评测,例如Blizzard Challenge国际语音合成大赛,主要是基于人工评测,仅凭个人主观感觉在清晰度、自然度、可懂度等几个维度对引擎合成质量打分。


实际业务中,企业采用基于MOS的内部TTS评测方法,由于指标维度、评测人员、测评方法步骤等无法保持一致,因此内部的评测结果很难用于竞品对标,多数仅用于自我能力提升。同时,语音合成作为服务形式提供给用户,除了合成质量以外,业务场景相关性和系统可靠安全能力也已经成为客户越来越关注的能力指标。

为了解决以上的问题,中文语音合成服务评估规范拟推出TTS-4S体系,敬请关注… 

全景.jpg

2019年4月24日,中国人工智能产业发展联盟(以下简称“联盟”或“AIIA”)评估认证工作组组织召开了中文语音合成服务系统评估规范第二次研讨会,来自腾讯、搜狗、科大讯飞、百度、极限元、阳光保险集团、中国移动通信集团、北京海天瑞声等企业的多位专家参加。本次会议主要就中文语音合成服务系统评估规范第一次研讨会中专家的建议和《中文语音合成服务系统评估规范V1.0》修订部分进行讨论,同时就评测方法以及相关测试用例等进行研讨。

 曹峰-(4).jpg

本次会议由联盟评估认证组组长曹峰主持,首先介绍了中文语音合成服务系统评估规范前期开展的相关工作以及本次研讨会讨论的重点内容。

李荪-(3).jpg

之后,中文语音合成服务系统评估项目负责人,中国信通院云大所工程师李荪详细介绍了《中文语音合成服务系统评估规范V2.0》。目前该版本评估规范主要是从用户使用实际场景出发,通过建立TTS-4S(Standard.Similarity.Scene.System)评测体系,对评估指标项分类,从基准质量、相似还原度、场景表现力和系统安全可靠性四个维度评估语音合成服务系统综合能力。同时,李荪还就评测方法以及相关测试用例等进行了详细介绍。

专家.jpg

与会专家在研讨过程中充分表达观点和意见,对测试方法和用例提出完善性建议。后续评估组将按照本次研讨会各位专家的建议修改相关文稿,并预计于5月召开第三次研讨会,欢迎联盟成员单位和产业界的共同参与和讨论。

在此鸣谢在评估规范制定中特别贡献的单位,包括百度、科大讯飞、搜狗、腾讯、中科院自动化所(排名不分先后)


关键词: 语音合成 服务系统 评估规范

访问人数:4122
咨询电话
010-68094158
邮箱
jiahao@aiiaorg.cn
返回顶部