怎么将天籁技能嫁接到人工耳蜗上,商世东和他的团队,阅历了许屡次探索和测验。他们面对最大的困难,是人工耳蜗芯片体积有限,兼容差、核算才能弱,不足以承载很多的运算。
今年初,商世东团队找到了诺尔康公司,国内最大人工耳蜗厂商之一。重复讨论后,找到了处理的方法——手机伴侣APP加人工耳蜗优化计划。
简而言之,便是将核算处理进程,搬运到手机上,由神经网络对信号进行处理、过滤,再经过蓝牙设备,将信号发送到人工耳蜗。
天籁技能线下试验室一角。
“咱们采用了听觉场景分类技能,对话进程中的布景音乐,将被判别为环境噪音被过滤”,而在纯音乐场景,音乐将被完好保存,并对旋律和音色进行增强。
以上技能的难点在于,怎么判别哪些是噪音,哪些是有用的布景音?这就涉及到神经网络的练习。
腾讯多媒体试验室高档研究员王燕南正在试验室里作业。
“咱们会搜集很多的声响数据,做裁剪和清洗、提取特征,再参加模型练习,假如模型准确率达不到99%,咱们会继续搜集,一向做到规范停止”。
商世东说,经过练习,AI现在达到了96.2%的场景辨认准确率,“人工耳蜗语音明晰度和辨认度提升了40%”。
王燕南手持采音设备,前往深圳街头捕捉噪音样本。
咱们的视野,再次回到了陶正红和晓婷身上。陶正红说,上高中后,女儿好像一会儿就长大了。15岁的晓婷,每周日从顺德到广州上学,周五再从校园返家。
往复之路,她不再需求母亲的陪同,坐公交、坐高铁、转地铁,她知道哪儿买票,从哪儿检票、进站,出站走哪一条路……“光是这一点,她就比我强多了”,陶正红说,“曾经是我照料她,现在变成她照料我了”。
女儿就读于广州某特教校园高中部A班,“在他们那群孩子里,这是最好的校园、最好的班”,陶正红满意地说,A班只要3名非广州本地生源,女儿是其中之一。
“她将来想去北京上大学”,陶正红说,我信任,她能够的。
舞蹈练习的间歇,晓婷在和妈妈攀谈。