云知声-上海师范大学自然人机交互联合实验室获
Blizzard Challenge 2020 语音合成大赛刚刚落下帷幕。由云知声-上海师范大学自然人机交互联合实验室申报的系统在强敌环伺的赛场中突出重围,参赛即斩获中文普通话、上海话多项关键指标第一,再一次印证了云知声语音合成技术在业界的领先水准。
Blizzard Challenge 国际语音合成大赛是由美国卡耐基-梅隆大学和日本名古屋工业大学联合发起的公开的语音合成技术评测平台,是语音合成领域最具权威性的技术评测比赛。比赛旨在构建一个公开、统一的语音合成技术评测平台,加强世界各地语音合成研究机构之间的技术交流与沟通,共同推动语音技术的快速发展。
其作为国际上规模最大、影响力最大的语音合成大赛,至今已成功举办过 15 届,每年都吸引众多国际一流的科研单位和企业参赛。以往参赛队伍包括 CMU(美国卡耐基-梅隆大学)、Cambridge University(英国剑桥大学)、University of Edinburge(英国爱丁堡大学)、Nitech (日本名古屋工业大学)、科大讯飞、中科院自动化所等国内外语音合成领域的顶尖高手。
多指标领跑,强劲的综合实力
语音作为人工智能技术发展的三大方向之一,在应用落地过程中,受外部环境影响极大,对语音系统模型、引擎等要求极为严苛。从语音合成需求的角度来看,自然度、相似度和可懂度是实际应用中最为核心的三大核心指标。
Blizzard Challenge 2020 分两个任务
1)中文普通话合成(Hub task),以高表现力的声音作为合成样本,充分考察参赛者对复杂多变的韵律节奏的把控能力,旨在输出高真实感的合成语音,这次比赛还考察参赛者对段落韵律的把控能力;
2)上海话合成(Spoke task),提供的声音数据较少,充分考察参赛者在小样本上的学习能力。
本次比赛中,联合实验室团队凭借在合成领域的深厚积累,中文普通话合成自然度 MOS 达到 4.2,段落合成所有指标(Overrall impression\pleasantness\speech pauses\stress\intonation\emotion\listening effort)位列第一,并且通过迁移学习,从零开始快速构建了上海话合成系统,合成自然度 MOS 达到4.0,双双领跑;与此,普通话相似度、上海话可懂度两项指标亦领跑榜单,充分体现了团队合成技术的综合实力。
注A 为真人声,B-Q 为参赛队伍,云知声-上海师范大学联合实验室队伍代码为 I
注自然度主要评价合成语音是否像真人说话一样自然流畅,相似度主要评价合成语音与目标说话人在音色和韵律上的相似程度,自然度和相似度是合成系统的最重要的两个评测指标,分数越高,说明效果越好。一般大学生发音自然度为 4.0 分。由于上海话原始数据质量较低,团队为了获得更好的听感,对原始语音进行了升采样率的处理,所以相似度方向会有损伤。
本次大赛上,团队采用业界主流的端到端合成技术,并针对端到端合成系统普遍存在的稳定性和效率问题进行了较多优化,在解决稳定性的,可以实现高效率的合成。目前,该项技术已经在云知声家居、金融、儿童机器人等业务领域合作伙伴的产品中广泛使用,并取得良好反响。
,本次比赛涉及大规模高复杂度的模型训练,在这过程充分体现了云知声计算资源优势。实际上,从 2012 年开始,云知声便开始搭建自身的 DeepFlo 集群,该异构化硬件服务器集群可向上提供密集的计算和存储能力,保证云知声研发团队充足算力的支持。目前该集群规模为 1000GPU 以上,计算能力达 1 亿亿次/秒,在以美国的 IBM Summit 超算平台、我国的神威太湖之光超算平台为代表的全球超算平台算力排名中位列前 20 位。
在 DeepFlo 集群的支撑下,云知声建设完成了 Atlas 分布式机器学习并行计算平台,可内部协同共享 AI 底层研发技术成果,迁移复用至各领域应用,最终完成 ASR、TTS、NLU 等顶层 AI 技术的输出与应用。
参赛只是一场自我测试,技术研究的终点一定是应用。未来,云知声将以此实验室研究成果为支撑,生成有温度的声音,帮助客户打造完美的人际交互体验。
特别提醒本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。
扫地机器人排行榜
- 从重达百斤价值百万,到能负载2吨,外骨骼机器
- 2022年全球人工智能产业态势分析
- 超拟人数字人重磅发布,讯飞智作引流数字人新
- 低空经济破局进行时:无人机末端配送常态化,
- MDN Web 文档项目引入生成式 AI 后遭到开发者广泛
- 产教融合 校企联动 GCVC大会技术与教育论坛成功
- 中国工业互联网平台的最新观察
- 三菱电机:匠心独具 打造功率半导体行业“样本
- 玩机器人玩出“十一连冠” 碧波实小国际大赛再
- 一体化、智能化、自动化——引领模具智造 DM
- 英特尔携美国红十字会 将人工智能技术用于防灾
- 抓住人工智能“牛鼻子” 加快形成新质生产力
- 中国探月工程正打造月球版北斗系统,深空互联
- 减轻员工工作量 新加坡图书馆试用机器人管理员
- 全球机器人产业竞争中的中国策略加快追赶步伐
- OpenAI 不惜重金挖角谷歌,年薪可达 1000 万美元