腾讯商世东：腾讯天籁自研AI算法，助力国产千元级助听器达到国际领先标准

在2022年9月25日国际聋人日之际，在中国老龄化发展基金会、中国聋人协会的指导下，腾讯之声行动组织召开2022年会，正式公布了聋人产品研发、公益支持、生产研究创造等方面的重大成果。在产品研发层面，腾讯首次发布了完全自主研发的助听器核心算法解决方案，并与助听器厂商智慧听力技术合作研发，推出了专注听力（腾讯内部）助听器“公益老人扶助模式”。会上，腾讯会议音响实验室主任尚世东以“AI助听器，听声音”为主题发表了演讲。尚士东表示，“声音行动”的初衷是通过技术开放来提高助听器的使用率，在这两年的运营中，团队一直在思考如何覆盖更多的聋人和聋人，为他们做更多的事情。

（图片：腾讯会议团队实验室主任尚世东）中国有超过1.2亿老年人患有听力损失。助听器作为改善老年人听力干预的重要设备，在我国老年听力障碍人群中使用率很低。这一次，腾讯大会TeanLab向国内厂商开放了TeanAI音频技术，有效提升了国产助听器的使用体验。在过去的三个月里，腾讯大会Arianware Labs、腾讯SSV Silver Technology Labs等联合项目团队多次前往广东韶关，对当地老年人进行听力测试，并为他们进行助听器的安装和捐赠。尚士东表示，基于腾讯天安实验室全面开发的助听器核心算法解决方案，在复杂场景下语音清晰度和理解度可以提高85%，1000元级国产助听器也可以与1000元级进口助听器产品相媲美。在符合IEC60118和ANSI S3.22标准的测试环境中，助听器在所有六个关键指标上均达到进口助听器的水平。同时，使听力障碍者更容易使用共同工作工具。商世东宣布，腾讯大会与腾讯公益慈善基金会联合启动“无障碍沟通”公益梦活动。用户将参加腾讯大会低碳大会等公益活动，收到一朵小小的红花，捐款支持公益梦想。后来，透过创新的公共服务模式“一流一梦”，向2万名听障人士捐赠无障碍办公室套装，持续关注听障人士的用户体验，为他们提供照顾服务。以下是上士东的演讲录：尊敬的领导人，各位嘉宾，媒体朋友，网上观众，大家好，我是腾讯上士东会议研究所主任。今天的主题是“聆听神的声音”。在我开始之前，我想告诉你三个简单的故事：一个11岁的女孩，由于大前庭水综合症而患有严重听力障碍，在她三岁时被植入了人工耳蜗。曹登是一名运动员，22岁时听力严重受损，19岁时接受了人工耳蜗植入。77岁的唐晨长期暴露在嘈杂的工作环境中，造成严重听力损失、老年人听力损失，70岁时开始佩戴助听器。从这三个故事中，倾听我们周围的世界对我们来说是理所当然和自然的，但对他们来说却很难做到。他们可以是年轻人，孩子或老人。无论是在中国还是在世界范围内，聋人都是一个非常庞大的群体。如果听力障碍得不到及时有效的干预，可能会对一个人的身心造成长期的不良影响，导致孤独、焦虑、缺乏自信、自我封闭等。在我20多年的职业生涯中，我一直从事音频相关的技术研究和商业化。两年多前，在和一位朋友聊天时，我了解到许多听力受损的人虽然佩戴了人工耳蜗或助听器等辅助听力设备，但仍然面临着在餐馆或街道等嘈杂环境中听不到声音的问题。当时，经过腾讯大会多年的研发和数亿用户验证，我想知道是否可以将语音降噪和增强技术应用到助听器上，让聋人听得更清楚、听得更真实。考虑到这一点，我们开始寻找合适的合作伙伴。一开始，很多合作伙伴都不知道我们想做什么，所以我们被拒绝了很多次，并与合作伙伴进行了多次互动。虽然我们一直在做与声音有关的事情，但助听器对我们来说是一个全新的领域，有很多跨国知识需要学习。从2020年开始，经过半年多的验证，解决了人工耳蜗实时噪声处理问题，取得了一些初步成果。在两年前的国际聋人日，我们正式启动了“自然行动”，旨在通过技术开放来提高助听器的功效。“地球-地球行动”已经运营了两年，目前已有多家国内外助听器合作伙伴与我们进行技术合作，包括奥地利Mediro、国内制造商Norkang、澳大利亚Collier和中国联通。Airways与Medro合作，将听力损失患者的单词识别率提高了66%。我们与Norcon合作，将人工耳蜗的清晰度和可理解性提高了40%。我们与Collier在频率测量、声消除和听力康复领域开展合作，为听力受损人士提供从听力测量到听力改善的全链解决方案。“声音行动”和中国联通推出了升级版的联通网卡，用于二级听和字幕识别，让听障人士不仅能听得清楚，而且能看得清楚。但是，这还不够，因为它本身就足够了。我们一直在思考如何接触到更多的聋人和聋人。今年，我与业内许多专家进行了交谈，了解到中国老年听力障碍患者数量众多，尤其容易被忽视。相关数据显示，每三个老年人中就有一个患有中度、重度甚至非常严重的听力障碍。我和很多朋友谈过这件事，我们家里几乎都有这样的老人。老年人听力损失的问题，无论是老年人自己还是低年级的孩子，都不是每个人都注意到这个问题，在我们的普遍认知中，人们认为老年人，耳聋是很自然的事情，不需要太多的干预，这是一个认知层面的问题。但事实上，老年人一旦听力损失，就会带来很多实际问题，他们会越来越不愿意交流，感到越来越孤独。相关研究表明，老年人的听力障碍与抑郁和认知障碍之间存在很强的相关性，听力损失的老年人比听力正常的人更容易患阿尔茨海默氏症和痴呆症。随着听力损失变得越来越严重，相关风险也会增加。因此，从去年年底开始，我们就进一步思考如何通过科技和腾讯的众多平台资源来帮助聋哑人。今年3月3日全国听力日，我们推出了音频行动2.0升级版，助听器是辅助老年人听力干预的重要手段，我们将向国内厂商开放音频AI音频技术，有效提升国产助听器的使用体验，提高听力筛查、科学、老年人对听力损失的认识。通过中国老龄化发展基金会，我们将设立银关怀基金，为经济困难的老年人免费捐赠音频助听器。今年4月，第一家天然银护理基金在广东韶关市试点落地。在过去的三个月里，我们团队的合作伙伴多次前往广东省韶关市仁华县和乳源县，为当地老年人进行听力测试，并为他们安装腾讯音频助听器。在过去的六个月里，Audio Labs与助听器制造商的智能聆听技术进行了联合研发。（腾讯音频内部）推出公益老人扶助模式，基于腾讯大会全面自我研究，助听器核心算法解决方案，复杂场景语音清晰度和理解度提升85%，1000元国产助听器也可媲美进口助听器产品的体验。在符合国际IEC60118和ANSI S3.22标准的测试环境中，测量助听器的六大主要指标，系统延迟直接决定助听器的整体佩戴体验。全移位增益进一步决定了中度至重度患者的听力补偿。声音质量和空间噪声决定了安静环境下的音质体验。家庭和街道噪音是听力受损者花费最多时间的场景。在这六个关键指标上，我们可以看到我们的表现非常好。分别是在京东购买的两款北欧进口助听器（对比），一款价值3万元左右，另一款价值不到2万元，在我们的环境中进行了一对一的对比，可以看出，音频音频助听器的使用体验非常好，平衡。在六项主要指标上，已超过进口助听器的水平。当然，我们也意识到，目前的规划是基于通用蓝牙处理芯片，相比进口助听器的专用处理芯片。在功耗方面存在很大差异，需要进一步优化和改进。这也是为了今后的工作，为今后的努力指明了方向。腾讯会议团队实验室将多年来积累的技术应用于助听器解决方案中，包括在国际竞赛“DCASE声学场景识别与分类”中获得亚军的关键突破性技术，以及今年早些时候在ICASSP2022DNS语音增强与噪声竞赛中获得冠军的个性化语音模式技术。我们还优化了远场波速度成形和反馈抑制技术，这些技术曾在腾讯会议室场景中获得腾讯公司技术突破奖，以适应助听器的低延迟、低功耗场景。