研究人员开发智能应用程序,以帮助听力损失

Issa Panahi博士,Issa Panahi博士,Erik Jonsson工程和计算机科学学院电气和计算机工程教授已经领导了基于智能手机的应用程序的发展,帮助您在国立健康研究院的支持下遇到听力损失。信誉:达拉斯德克萨斯大学

德克萨斯大学达拉斯研究人员开发了基于智能手机的应用程序,解决了听力损失的人最大的问题:过滤噪音噪音并改善语音感知。

最近的应用程序之一,在在线公布的7月27日发布的研究中详述美国声学学会杂志,使用人工智能去除无关的潺潺声,街道和其他声音通过智能手机和耳塞以及使用有线或无线连接的设备。这篇文章是67项研究中的一个,研究人员为人们提供了他们的工作在2014年以来的学术期刊和会议。

最新的工作,由国家耳聋和国家聋人研究所(NIH)的国家耳聋和其他沟通障碍研究所(NIH)资助的最新工作是开发开源的努力的一部分语音处理研究平台和改进。NIH还为2015年提供了两年,522,000美元的拨款(5亿美元)使用改善听力设备。

伊萨·帕纳西博士是埃里克·琼森工程与计算机科学学院的电气与计算机工程教授,也是该项目的首席研究员,他说这些应用程序是实时运行的,因此发出的信号与说话人的嘴唇运动是同步的。该技术可以定位和显示语音源的方向,抑制背景并改善言语质量和感知。

“如果你在一个嘈杂的环境中与我交谈,我仍然可以很好地识别你的话,当使用基于智能手机的应用程序时,讲话并不扭曲,”Panahi说。“这就是听力损失需求的人。”

根据世界卫生组织的说法,全球约4.66亿人,其中包括3400万儿童,经验禁用听力损失。据NIH称,大约15%的美国成年人报告了一些麻烦。

“在我们的研究中,我们努力开发经济实惠的平台和辅助工具,帮助听力障碍的人,提高他们的生活质量,”Panahi说。

在UT DALLAS CALLIER COMPENCESENT的应用程序进行了初步测试,宣传障碍的初步测试表明,听证会受损的人们有22%的受益性,在没有听力损失的情况下,在没有听力损失的情况下,人们效益29%行为和脑科学学院的演讲,语言和听证会项目和教授。

“尽管个人辅助技术中有复杂的降噪电路,但听力损失的人通常会报告嘈杂的环境中的嘈杂环境中的呼声言论,”雷迪法说。“提供了一些可用的解决方案,提供了一个显着的好处涉及将远程麦克风放置在谈话者上,以将信号直接传输到侦听器。但是,这些远程麦克风系统可以非常昂贵,有时在实践中使用尴尬。”

研究人员发达了仅使用智能手机的内置麦克风的噪声过滤和语音增强应用程序。已在Android和基于IOS的智能手机上测试的应用程序也可以与听力辅助设备一起使用。该技术指示噪声来自所以用户可以改变手机的方向以获得更好的音质。

“如果将应用程序提供的按钮放在智能手机触摸屏面板上一直到最大值,它会抑制所有噪声,以便您无法听到任何声音,类似于噪音消除耳机的表现。但是,用户可以不同调整按钮,以便抑制背景噪声,语音变得清晰地对不同和不同的嘈杂环境中的用户的听力水平。我们开发了符合不同情况,以帮助用户尽可能地帮助用户,“Panahi说,”统计信号处理研究实验室和UT声学实验室的创始主管。

许多新应用基于新颖的深度神经网络和机器学习技术,它使用大量的预先定义的现实生活数据。为了开发技术,研究人员首先创建了不同清洁语音信号的大规模数据库,背景噪声信号和嘈杂的语音信号,即一个人可能在日常生活中遇到。这些数据用于培训软件并产生适当的模型。然后由智能手机应用程序使用模型以产生清晰嘈杂环境中的信号。

研究人员还发表了关于一种小型应用程序的研究,该应用程序检测警报信号,例如紧急警报和家庭报警,避免抑制有助于听力损失的人的背景噪音。

在团队中提供了开发的方法,发布论文,算法,代码,用户指南,技术文档和音频/视频演示研究实验室网站

更多信息:Nikhil Shankar等。使用基本的经常性神经网络电池进行高效的双麦克风语音增强,用于听力和助听器,美国声学学会杂志(2020)。DOI:10.1121 / 10.0001600

信息信息:美国声学学会杂志