手机行业|百度语音+自动驾驶感知+深度学习平台技术解析手机行业

文章图片

文章图片

HIEV快讯（文/戒僧）本文将解析三部分技术内容，出自百度2023 Create大会-技术开放日：
?百度如何用“手机全双工语音交互”改善使用导航应用的体验
?如何用“上帝视角”BEV技术提升汽车的自动驾驶能力
?如何用百度自研的深度学习平台飞桨加速科学研究
百度的“手机全双工语音交互”据百度语音首席架构师贾磊介绍，在世界范围内，很长时间都没有一个方案能普适的支持在手机上实现全双工的语音交互——在手机播放导航提示的同时，也能够听清我们的指令，甚至像真人对话一样可以被我们随时打断，并对新的语音指令给予反馈。
困难有不少。想要实现全双工语音交互，必须先做回声消除，避免手机终端识别自己播放的声音。贾磊说，在前装软件的音箱、车载系统上比较容易实现，可以通过硬件适配算法，提前保证回声消除的效果。
而手机App属于纯软件后装方案，需要让软件算法适配不同型号的终端硬件。通常，手机上喇叭距离麦克风的距离比较近，同时手机终端款式多，硬件参差不齐。这些因素叠加在一起，会导致声音信号的回声消除会出现各种各样的问题。再加上手机硬件的迭代更新非常快速，回声消除效果就更加难以保证了。

面对这个难题，百度的解决方法是：融合传统信号处理和深度学习模型各自的优点，基于语音识别目标，端到端地进行回声消除和信号增强，解决了手机场景下的回声消除问题，即使手机音量开到最大，回声消除量也能达到40分贝，使得手机APP的语音识别功能能够正常工作。

【手机行业|百度语音+自动驾驶感知+深度学习平台技术解析】据百度介绍，这是世界范围内、在全行业，第一个能在手机上实现纯软件方案回声消除的技术。百度研发出的基于SMLTA2的多场景统一预训练模型，一个模型解决噪声、用户口音和回声消除残余吸收等难题，在各场景下识别率相对提升超过20% ，这在业界同类技术中，准确率是最高的，可以说实力遥遥领先。

百度的BEV及UniBEV自动驾驶感知方案在自动驾驶领域，传统的图像空间感知方法是将汽车上的雷达、摄像头等不同传感器采集来的数据分别进行分析运算，把各项分析结果融合到统一的空间坐标系中，去规划车辆的行驶轨迹。这个过程中，每个独立传感器收集到的数据往往受到特定视角的局限，经过各自的分析运算后，融合阶段会导致误差叠加，无法拼凑出道路实际情况的准确全貌，给车辆的决策规划带来困难。
近些年来，行业中提出了BEV（Bird's Eye View ，视觉为中心的俯视图）自动驾驶感知方案。不同于传统的方式， BEV自动驾驶感知就好比是一个从高处统观全局的“上帝视角” ，车上多个传感器采集的数据，会输入到一个统一模型进行整体分析推理生成鸟瞰图，能有效地避免误差叠加；这种方案还能够做到时序融合，不仅是收集一个时刻的数据，分析一个时刻的数据，而是支持把过去一个时间片段中的数据都融合进模型做环境感知建模，时序信息的引入让感知到的结果更稳定，使得车辆对于道路情况的判断更加准确、让自动驾驶更安全。