Aizip的ZenVoice Bone AI模型与Bosch Sensortec的BMA550传感器结合,为TWS耳机提供卓越的降噪效果。
利用BMA550传感器的能力,ZenVoice Bone AI模型在降噪、干扰分离和语音捕捉方面表现出色,同时可以在低功耗设备上高效运行。
这项合作在2024年Sensors Converge大会上获得了“最佳传感器奖”,在健康领域获得了认可。
深度降噪的幕后专家 博世传感器+AI模型
Aizip于2020 年创立于美国硅谷,专注于微型人工智能(Tiny AI)在感知端、边缘端等智能硬件上的端侧AI应用。该组织的主要产品为智能视觉系统、自然语言处理、数据分析与机器学习,在多个行业有广泛应用。
由Aizip与Bosch Sensortec合作开发的ZenVoice Bone便是可穿戴设备技术领域中的一次重大技术进步。ZenVoice Bone是一种先进的深度降噪算法,能做到在极度嘈杂的环境中捕捉到语音活动,为TWS耳机提供卓越的语音清晰度,提升通话质量。
这一合作利用了Bosch Sensortec创新的BMA550传感器和Aizip的先进神经网络架构,提供了无与伦比的语音清晰度。
BMA550传感器,凭借其高带宽加速度计,是ZenVoice Bone解决方案中的重要组成部分。BMA550既是一种加速度传感器,也是一种声音传感器,可用于感测骨传导语音。语音活动检测到通话时,可启动语音增强功能,智能“语音增强”功能可以过滤掉通话过程中的噪音,并放大说话者的声音。这意味着即使在嘈杂的环境中,对方始终能清楚听到说话者的声音。
与标准加速度计相比,提供了5-7倍的低噪声,确保了对噪声抑制和语音增强至关重要的清晰度。其低功耗和高达2350Hz的宽信号带宽使其成为始终开启的语音应用的理想选择。
Aizip的Zenet轻量化神经网络架构通过提供高效的音频处理能力来辅助补充BMA550。ZenVoice Bone模型在不牺牲降噪效率的情况下,实现了处理能力和内存需求的显著减少10倍的效果。这种集成允许在紧凑的IC芯片上部署复杂的音频智能,显著降低成本和功耗。
主要特性和优势
1.卓越降噪效果: ZenVoice Bone在保留基础语音的同时,即使在信噪比低至-15 dB的情况下,也能去除大部分噪声。
2.人声干扰分离:该解决方案可以在不需要声域划分的情况下,区分用户的语音与背景语音,利用BMA550感测骨传导语音,这是单麦克风解决方案无法实现的。
3.紧凑且高效:ZenVoice Bone在资源受限的硬件上高效运行,模型内存占用范围为60 KB至300 KB,支持实时噪声消除,延迟极低。
4.语音捕捉:BMA550的低噪声和宽带宽捕捉了广泛的语音信息,对于ZenVoice Bone在诸如85db风噪声等嘈杂环境中恢复语音至关重要。
5.低功耗:该解决方案的计算需求低,使其适用于如TWS耳机和助听器等低功耗、紧凑型设备。
实际应用和影响
ZenVoice Bone在嘈杂环境中提供清晰通信的能力,使其成为各种可穿戴设备的变革性技术,包括TWS耳机、助听器和耳机。Bosch Sensortec的BMA550传感器和Aizip的AI软件集成不仅提升了用户通话体验,还通过延长电池寿命和降低成本拓宽了可穿戴设备的潜在应用。
例如,下图频谱图展示了ZenVoice Bone在高噪声环境中的有效性,它在85db风噪声中隔离并重建最终用户的语音。
这次合作强调了硬件和软件在推动噪声消除技术进步中的共生关系。BMA550传感器的卓越能力对ZenVoice Bone算法有效运行至关重要,提供了执行其复杂的噪声抑制和语音增强任务所必要的数据保真度。
Yuan Lu Aizip联合创始人、总裁:
BMA550传感器的数据,具有超低噪声和非常宽的带宽,显著增强了ZenVoice Bone算法从背景噪声中恢复重要语音信息的能力,确保清晰的语音输出。
Marcellino Gemelli Bosch Sensortec全球业务发展主管:
与Aizip这样专注于可穿戴应用神经网络的专家合作,使Bosch Sensortec能够提供复杂的解决方案。通过将我们合作伙伴的领域专长与我们的先进传感器技术相结合,为客户创造了创新的产品。
另一方面,Aizip开发的先进神经网络架构充分发挥了BMA550传感器的潜力,展示了集成解决方案如何推动技术进步。此次合作凸显了将尖端传感器技术与先进AI解决方案结合起来,以满足不断变化的消费者需求,并在音频技术行业设定新标准的重要性。
Aizip & Bosch Sensortec 荣获2024年“最佳传感器奖”
Aizip与Bosch Sensortec的这套合作方案在Sensors Converge(美国传感器及技术大会)上荣获2024年“最佳传感器奖”,赢得了健康领域的认可,表彰他们合作革新TWS耳机中降噪技术的BMA550传感器。这一荣誉凸显了这一合作的创新影响力和行业重要性。Bosch Sensortec将持续创新突破技术边界,和全球及本土的合作伙伴紧密合作,共同打造智慧未来新生态。
全部评论