当前位置: 杭州网 - > - 杭网原创 - > - 原创新闻
用AI复原聋哑人原声!这个新技术应用在杭州试点
发布时间:2023-07-21 16:40:14 Fri  来源:杭州网杭州通客户端

“我有一个愿望,希望能与顾客进行直接的交流。”90后小陈是一位甜品师,去年她在杭州马塍路上开了一家甜品店,但由于天生听障,遇到商品原材料等问题时,往往很难回答顾客的疑问。

不过,最近在新技术的助力下,小陈可以用自己的声音“说话”了。只要打开应用软件上传5分钟没有完整语义的发声片段,然后在产品中输入想要表达的文字,就可以用原本的声音说出来。

在使用后,小陈发现顾客变得更有耐心了,交流变得更平等和顺畅,她也变得更自信,更愿意积极主动地与顾客进行交流。

据了解,这是在第4届亚残运会组委会、中国残疾人事业新闻宣传促进会、浙江省残疾人联合会的指导下,浙江省残疾人福利基金会联合网易集团、网易公益发起的“人生第一句”公益计划,利用AI技术打造的首个AI复原听障人士原声的工具音书App,目前正在杭州市马塍街残疾人融合就业街区试点应用。

不久前,浙江省残疾人福利基金会面向浙江特殊教育职业学院的学生和音书APP(拥有百万听障用户)的部分用户开展调研。调研结果显示,仅有十分之一的受访对象能够通过简单的口语与身边的人进行交流,他们中的大多数人经历过太多想说但说不出的自卑与懊恼,最大的梦想便是能说出“人生第一句”。

同时,合作团队研究发现,目前市场上绝大多数语音克隆产品需要输入完整讲话采集数据,对于无法正常发出语义的听障人士来说并不适用。而且面向听障人士的交流工具,大多也只有文字转语音功能,他们无法用自有的音色表达。于是他们利用iSpeech技术,基于海量数据的预训练模型,加上听障人士极少量的纯语音数据快速微调算法模型,在快速克隆新的说话人音色的同时保留基础模型的内容发音能力,研发首个听障人士声音复原工具,实现只需输入文字就可实时用原声流畅表达,让听障人士能圆梦“人生第一句”。

浙江省残疾人福利基金会理事长赵小飞表示,浙江省共有持证残疾人133.7万人,其中听力残疾20.8万人、言语残疾1.7万人,希望通过这一AI技术帮助他们用自己的音色向他人传递内心真实想法,进而推动解决该群体在和健听人沟通交流过程中存在的障碍问题,改变他们的生活、学习和工作环境状况及相应的能力水平,使他们真正能够平等参与社会生活,实现人生价值。

据悉,目前该应用供全国有需要人群免费使用,后期还将用到更多的使用场景,公益行动发起方希望通过AI技术帮助听障人士实现“亲口说话”的人生梦想,并号召人们“益”起来关注残障人士,关注无障碍环境建设。

作者:记者 陈文婧  编辑:戎丽娟
杭州网·国家重点新闻网站