基于MCF5235开发板的AEC算法的实现与应用研究
作者：龚乐中;李广军;郭志勇
引言
voip是在ip网络上实现音视频及传真信号传输的一门全新的集成业务数据网络技术。ip语音传输技术具有节省带宽、话费低，可方便地集成智能型开放体系结构以及多媒体业务等优势。但较之传统电话，其语音质量较差。事实上，影响因特网语音质量的因素是多方面的，关键因素之一是回声的影响。因此，要提高因特网的语音质量，就必须在语音传输过程中进行回声消除。aec是基于自适应算法并可用于voip的声学回声消除技术。而用于aec算法的实现与研究的硬件平台是以freescale公司的mcf5235为核心的开发板。mcf523x系列mcu是首个以带有增强型乘加运算单元（emac）的coldfire v2内核为核心，该产品同时结合了增强型时序处理单元（etpu）和10／100以太网多媒体通道控制模块（mac）的mcu，因而具有强大的数据处理能力和丰富的接口，能够满足voip电话终端对数据处理速度以及网络通讯安全的要求。
1 回声消除
1.1 声学回声消除原理
aec是以扬声器信号与由它产生的多路径回声的相关性为基础建立的远端信号语音模型，利用它可对回声进行估计，并不断地修改滤波器的系数，以使估计值更逼近真实的回声，然后，将回声估计值从话筒的输人信号中减去，从而达到消除回声之目的。
声学回声消除器的结构原理如图1所示。其中y（n）代表远端语音信号，r（n）代表回声，x（n）是已经叠加了回声信号r（n）的近端语音信号。对回声消除器来说，可将远端信号作为一个参考信号，然后由自适应滤波器通过它来产生回声的估计值r′（n），再从近端带有回声的语音信号中减去r′（n），从而估计出近端输出信号μ（n）。在近端未说话时，即当x（n）=0时，μ（n）即为回声的残差信号e（n）。e（n）的计算方程为：
e（n）=r（n）-r′（n） （1）
此时，回声的残留信号的理想值应为0。
1.2 自适应fir滤波器
在声学回声消除器里，横向结构的自适应滤波器可通过参考信号来产生回声的副本，其原理如图2所示。如果这个横向结构的自适应滤波器的转换函数与回声通道的函数模型一致，那么，回声的副本与回声就应该是一致的，这样，通过两者的抵消便可达到消除回声之目的。
fir滤波器的最主要特点是没有反馈回路，这是一种非递归系统，它的冲激响应是一个有限长序列。fir滤波器的输出计算公式为：
自适应fir滤波器根据上一刻的近端输出信号μ（n）及远端语音信号y（n），并通过自适应算法来估算当前时刻fir滤波器的系数ak（n+1）。
1.3 lms算法和nlms算法
在输入信号和参考信号都是平稳随机信号的情况下，自适应滤波器的均方误差e［e（n）］性能曲面是滤波器加权系数ak的二次函数。其系数修正算法通常采用可使均方误差最小的最优化求解算法。
由于实际的梯度值只能根据观测数据估计，因此lms算法提出的一个基本思想就是用平方误差e［e2（n）］来代替均方误差e［e（n）］。它是对基本的最速下降算法的改进，其算法迭代公式为：
ak（n+1）=ak（n）+2μe（e）*y（n） （3）
其中y（n）为输入信号，μ为迭代步长常量。
规一化lms （nlms）算法可用来在lms自适应滤波器方程里修正fir滤波器的系数。nlms算法与lms算法几乎是一样的，唯一的不同是nlms算法中使用可变步长控制因子来代替lms算法中的常量因子。其目的是加快算法的收敛速度。其算法迭代公式为：
其中，μ可由试验来确定。但应注意，μ的选取至关重要，为了确保收敛，必须满足0《μ《2。本方案中的自适应算法就是采用nlms算法。
1.4 语音检测
语音活动检测可用来确定三种语音状态：近端讲话状态、远端讲话状态和双端讲话状态。因为aec要根据不同的语音活动状态来进行相应的处理。它在检测到近端语音活动状态时，滤波器既不进行滤波，也不进行系数更新；而在检测到双端语音活动状态时，将停止滤波器系数的更新，但要进行滤波。由于在只有远端语音活动的状态下，既要进行滤波，又要进行系数更新。因此，语音活动状态检测的正确与否在很大程度上会影响回声消除的效果。语音活动检测流程如图3所示。
双端讲话情况可以通过设计近端话音检测器，并采用geigel算法来判决。利用该算法计算回声延时大小范围内的瞬时能量比较，具有着良好的性能优势。其geigel算法描述如下：
式中，n是fir延时级数，之所以将r（i）和最近n个远端输入的最大值进行比较，而不是仅仅和当前远端输入点y（i）进行比较，是因为回声路径延时具有不确定性。
2 实现方案
声学回声消除器aec主要包括fir滤波模块、geigle双端语音判决模块、nlms系数更新模块、语音状态控制模块四个部分，图4所示是该aec的简要工作流程。
freescale公司的硬件开发平台以coldfire系列mcf5235为核心。该系列mcu支持标准c语言及其专用的汇编语言。因此，在该平台上运行的功能模块需要使用c语言或者专用汇编。aec的开发及移植过程如图5所示。
设计时。首先应搭建aec的matlab模型并对该模型进行仿真验证。然后以已通过验证的模型为标准，搭建可在mcf5235开发板上运行的c语言模型。最后根据需要将运算较为密集的那部分c语言程序转化为coldfire芯片的专用汇编语言。
3 实验结果及分析
在matlab环境下对aec进行测试时，可将需要的三部分语音信号同时输入到回声消除器，然后测试回声消除的相关性能。
本测试所输入的语音信号波形如图6所示。从上到下依次是远端语音信号y（n）、近端语音信号x（n）和回声信号，其中与之和作为近端输入与y（n）一同构成了回声消除器的两个输入信号。将滤波器的阶数设置为512。即采取64 ms延时的回声消除。通过回声消除处理后所得到的残差信号e（n）的波形如图7所示。
从图6和图7的对比可以发现，当只存在远端信号和回声信号，而近端缄默的情况下，回声消除器能够快速收敛并消除绝大部分回声；而当双端都存在信号时，回声消除器能在消除回声的基础上较好的保持近端语音波形。
将aec功能模块集成到用mcf5235开发板搭建的voip终端上，来建立两个通信终端的语音通信，即可对aec功能模块进行实时免提通话测试。
4 结束语
本文介绍了声学回声消除的原理、声学回声消除器的设计以及aec在基于freescale公司mcf5235开发平台的voip语音通信终端上的集成方法。该aec的实现包括语音检测、自适应滤波等语音处理算法。其程序执行的实时性较好。通过matlab模型的仿真结果和通话主观测试结果证明，用该方案实现的声学回声消除器能够满足网络通信对语音的要求。
全新vivo S9将搭载天玑1100芯片
大功率电源EMC设计的难点在哪里？
Z Flip 5G具有引人注目的青铜色
电竞选手与大众一同狂欢？什么东西这么有魅力？
潮牌JEET蓝牙耳机销量迅猛，中端蓝牙耳机排名雄踞前三
基于MCF5235开发板的AEC算法的实现与应用研究
vivo S6照亮着“野生超模”陆仙人的“主角光环”
第四代英特尔至强可扩展处理器为科学计算工作负载带来诸多助益
ADI静音步进电机驱动芯片在3D打印机的应用
断路器和空开的理解与区别
ZKW将在未来两年内投资700万欧元建设研究实验室 将看准自动驾驶汽车全面商业化商机
曝AMD正准备两款可以和NV旗舰卡抗衡的产品 将瞄准RTX2080Ti
当前芯片短缺的原因是什么
兴达易控modbus转profinet网关与流量变送器兼容转modbusTCP网口协议
机构养老解决方案
分析移动边缘计算的安全风险及解决方案
远端模块上线过程详解
量子保密通信网络架构技术原理解析
dfrobot陶瓷电容包简介
三星S Charge+超级快充曝光：手机20分钟充满
引言
voip是在ip网络上实现音视频及传真信号传输的一门全新的集成业务数据网络技术。ip语音传输技术具有节省带宽、话费低，可方便地集成智能型开放体系结构以及多媒体业务等优势。但较之传统电话，其语音质量较差。事实上，影响因特网语音质量的因素是多方面的，关键因素之一是回声的影响。因此，要提高因特网的语音质量，就必须在语音传输过程中进行回声消除。aec是基于自适应算法并可用于voip的声学回声消除技术。而用于aec算法的实现与研究的硬件平台是以freescale公司的mcf5235为核心的开发板。mcf523x系列mcu是首个以带有增强型乘加运算单元（emac）的coldfire v2内核为核心，该产品同时结合了增强型时序处理单元（etpu）和10／100以太网多媒体通道控制模块（mac）的mcu，因而具有强大的数据处理能力和丰富的接口，能够满足voip电话终端对数据处理速度以及网络通讯安全的要求。
1 回声消除
1.1 声学回声消除原理
aec是以扬声器信号与由它产生的多路径回声的相关性为基础建立的远端信号语音模型，利用它可对回声进行估计，并不断地修改滤波器的系数，以使估计值更逼近真实的回声，然后，将回声估计值从话筒的输人信号中减去，从而达到消除回声之目的。
声学回声消除器的结构原理如图1所示。其中y（n）代表远端语音信号，r（n）代表回声，x（n）是已经叠加了回声信号r（n）的近端语音信号。对回声消除器来说，可将远端信号作为一个参考信号，然后由自适应滤波器通过它来产生回声的估计值r′（n），再从近端带有回声的语音信号中减去r′（n），从而估计出近端输出信号μ（n）。在近端未说话时，即当x（n）=0时，μ（n）即为回声的残差信号e（n）。e（n）的计算方程为：
e（n）=r（n）-r′（n） （1）
此时，回声的残留信号的理想值应为0。
1.2 自适应fir滤波器
在声学回声消除器里，横向结构的自适应滤波器可通过参考信号来产生回声的副本，其原理如图2所示。如果这个横向结构的自适应滤波器的转换函数与回声通道的函数模型一致，那么，回声的副本与回声就应该是一致的，这样，通过两者的抵消便可达到消除回声之目的。
fir滤波器的最主要特点是没有反馈回路，这是一种非递归系统，它的冲激响应是一个有限长序列。fir滤波器的输出计算公式为：
自适应fir滤波器根据上一刻的近端输出信号μ（n）及远端语音信号y（n），并通过自适应算法来估算当前时刻fir滤波器的系数ak（n+1）。
1.3 lms算法和nlms算法
在输入信号和参考信号都是平稳随机信号的情况下，自适应滤波器的均方误差e［e（n）］性能曲面是滤波器加权系数ak的二次函数。其系数修正算法通常采用可使均方误差最小的最优化求解算法。
由于实际的梯度值只能根据观测数据估计，因此lms算法提出的一个基本思想就是用平方误差e［e2（n）］来代替均方误差e［e（n）］。它是对基本的最速下降算法的改进，其算法迭代公式为：
ak（n+1）=ak（n）+2μe（e）*y（n） （3）
其中y（n）为输入信号，μ为迭代步长常量。
规一化lms （nlms）算法可用来在lms自适应滤波器方程里修正fir滤波器的系数。nlms算法与lms算法几乎是一样的，唯一的不同是nlms算法中使用可变步长控制因子来代替lms算法中的常量因子。其目的是加快算法的收敛速度。其算法迭代公式为：
其中，μ可由试验来确定。但应注意，μ的选取至关重要，为了确保收敛，必须满足0《μ《2。本方案中的自适应算法就是采用nlms算法。
1.4 语音检测
语音活动检测可用来确定三种语音状态：近端讲话状态、远端讲话状态和双端讲话状态。因为aec要根据不同的语音活动状态来进行相应的处理。它在检测到近端语音活动状态时，滤波器既不进行滤波，也不进行系数更新；而在检测到双端语音活动状态时，将停止滤波器系数的更新，但要进行滤波。由于在只有远端语音活动的状态下，既要进行滤波，又要进行系数更新。因此，语音活动状态检测的正确与否在很大程度上会影响回声消除的效果。语音活动检测流程如图3所示。
双端讲话情况可以通过设计近端话音检测器，并采用geigel算法来判决。利用该算法计算回声延时大小范围内的瞬时能量比较，具有着良好的性能优势。其geigel算法描述如下：
式中，n是fir延时级数，之所以将r（i）和最近n个远端输入的最大值进行比较，而不是仅仅和当前远端输入点y（i）进行比较，是因为回声路径延时具有不确定性。
2 实现方案
声学回声消除器aec主要包括fir滤波模块、geigle双端语音判决模块、nlms系数更新模块、语音状态控制模块四个部分，图4所示是该aec的简要工作流程。
freescale公司的硬件开发平台以coldfire系列mcf5235为核心。该系列mcu支持标准c语言及其专用的汇编语言。因此，在该平台上运行的功能模块需要使用c语言或者专用汇编。aec的开发及移植过程如图5所示。
设计时。首先应搭建aec的matlab模型并对该模型进行仿真验证。然后以已通过验证的模型为标准，搭建可在mcf5235开发板上运行的c语言模型。最后根据需要将运算较为密集的那部分c语言程序转化为coldfire芯片的专用汇编语言。
3 实验结果及分析
在matlab环境下对aec进行测试时，可将需要的三部分语音信号同时输入到回声消除器，然后测试回声消除的相关性能。
本测试所输入的语音信号波形如图6所示。从上到下依次是远端语音信号y（n）、近端语音信号x（n）和回声信号，其中与之和作为近端输入与y（n）一同构成了回声消除器的两个输入信号。将滤波器的阶数设置为512。即采取64 ms延时的回声消除。通过回声消除处理后所得到的残差信号e（n）的波形如图7所示。
从图6和图7的对比可以发现，当只存在远端信号和回声信号，而近端缄默的情况下，回声消除器能够快速收敛并消除绝大部分回声；而当双端都存在信号时，回声消除器能在消除回声的基础上较好的保持近端语音波形。
将aec功能模块集成到用mcf5235开发板搭建的voip终端上，来建立两个通信终端的语音通信，即可对aec功能模块进行实时免提通话测试。
4 结束语
本文介绍了声学回声消除的原理、声学回声消除器的设计以及aec在基于freescale公司mcf5235开发平台的voip语音通信终端上的集成方法。该aec的实现包括语音检测、自适应滤波等语音处理算法。其程序执行的实时性较好。通过matlab模型的仿真结果和通话主观测试结果证明，用该方案实现的声学回声消除器能够满足网络通信对语音的要求。
全新vivo S9将搭载天玑1100芯片
大功率电源EMC设计的难点在哪里？
Z Flip 5G具有引人注目的青铜色
电竞选手与大众一同狂欢？什么东西这么有魅力？
潮牌JEET蓝牙耳机销量迅猛，中端蓝牙耳机排名雄踞前三
基于MCF5235开发板的AEC算法的实现与应用研究
vivo S6照亮着“野生超模”陆仙人的“主角光环”
第四代英特尔至强可扩展处理器为科学计算工作负载带来诸多助益
ADI静音步进电机驱动芯片在3D打印机的应用
断路器和空开的理解与区别
ZKW将在未来两年内投资700万欧元建设研究实验室 将看准自动驾驶汽车全面商业化商机
曝AMD正准备两款可以和NV旗舰卡抗衡的产品 将瞄准RTX2080Ti
当前芯片短缺的原因是什么
兴达易控modbus转profinet网关与流量变送器兼容转modbusTCP网口协议
机构养老解决方案
分析移动边缘计算的安全风险及解决方案
远端模块上线过程详解
量子保密通信网络架构技术原理解析
dfrobot陶瓷电容包简介
三星S Charge+超级快充曝光：手机20分钟充满