CN111145771B 语音信号处理方法、处理装置、终端及其存储介质 （腾讯科技（深圳）有限公司）

本申请公开了语音信号处理方法、处理装第二语音信号进行回声处理得到对应于第一语信号进行回声处理得到对应于第一语音信号的号的相关度而判断回声中非线性失真信号的严2获取第二语音信号，所述第二语音信号为所述第一语音信对所述第二语音信号进行回声处理得到对应于所述第一语音信号的根据所述第一功率值和所述第二功率值计算所述第一语音信号和所述残差信号的相根据所述相关度获得对应的增益调节参数，并利用所述增益调节其中，E(k)为所述残差信号进行傅里叶变换后对应频点的频域根据所述功率相关度系数获得对应的增益调节参数，所述增益调节根据所述增益调整系数对所述第一语音信号在频域上对应频点的功率值进行抑制调5.根据权利要求1至4任意一项所述的方法对所述播放信号进行自适应滤波处理得到线性对所述线性回声信号进行反相处理并与所述对齐后的第3语音采集单元，用于获取第二语音信号，所述第二语音信号为所抑制调节单元，用于计算所述第一语音信号在频域上对利用所述增益调节参数对所述第一语音信号进行8.一种终端，其特征在于，包括权利要求6所9.一种计算机可读存储介质，存储有计算机可执行指4[0010]根据所述第一语音信号和所述残差信号的相关度对所述第一语音信号进行抑制5音信号和所述残差信号的相关度对所述第一语音信号理装置或如上第三方面所述的语音信号处理装置或如上第四方面所述的语音信号处理装[0029]图2是根据本申请实施例的语音信号处理方法和语音信号处理装置的一种应用场6[0041]影响通话语音质量的诸多因素中，回声问题是一个较为突出的问题。参照图1所用者的近端语音信号和回声信号一起发送至远端，这样远端的使用者则会接收到回声信[0042]现有技术中通过回声消除模块(AEC，AcousticEchoCancellation)解决回声的步抑制处理。上述的回声消除模块的回声处理效果取决于终端例如手机硬件自带的AEC算或者在一些应用场景下无法使用手机自带的硬件7可以是提供终端210和终端230语音通话支持的独立服务器或者是多个服务器组成的集群[0046]当本申请实施例的语音信号处理方法应用于图2所示的终端210，终端210作为本[0050]在一个实施例中，若语音信号处理方法应用于例如与上述终端230进行语音通信时域信号进行傅里叶变换得到。线性回声信号，线性回声信号可以是扬声器320所播放的语音信号在环境中反射等原因所也包括终端210侧用户(即近端终端使用者)通过麦克风310输入的近端语为对第一语音信号的播放增益进行调节，经过增益调节后的第一语音信号为驱动扬声器8调整模块进行调节时，步骤402中获取到的是调节后的第一语音信号在播放时所产生回声310采集的第二语音信号与第一语音信号或增益调节后的第一语音信号进行对齐，将对齐算法、归一化最小均方(NormalizedLeastMeanSquare，NLMS)算法、平均精度[0060]由于扬声器320的非线性失真问题在信号幅度较大的情况下比较凸显，因此根据高语音通信的质量，可以不对第一语音信号进行调整或对第一语音信号进行微小的调整，当残差信号与第一语音信号之间的相关度较高时，为了抑制扬声器320发出非线性回声信时域信号的增益进行抑制调节，也包括对第一语音信号的频域信号的增益进行抑制调节，例如分析第一语音信号的频域信号的功率值与残差信号在频域上对应频点的功率值的相号中容易导致扬声器320发出非线性回声信号的部分进行了抑制调整，这样能够抑制当前9[0065]在一个实施例中，终端对所获取的第一语音信号和残差数为第一语音信号在频域上各频点对应的增[0070]采用线性函数的关系能够更好地针对所获取的残差信号的非线性回声成分对第一语音信号的增益进行调节，但是由于考虑到针对不同终端的扬声器非线性失真特性不e(n)通过快速傅里叶变换转换到频域信号E(k)，并计算残差信号e(n)在频域第k个频点的[0081]残差信号e(n)和第一语音信号x(n)在各频点上的功率相关度系数corr(k)反映了残差信号e(n)中在各个频点上的非线性回声信号程度，当功率相关度系数corr(k)的数值较高时，表示当前频点上的非线性回声程度较高，[0083]配置增益系数g(k)就是把将第一语音信号x(n)经过快速傅里叶变换后得到的频了避免影响正常的语音通信，将corr(k)乘与由于因此可以相应降低功率相根据需要通过线性函数计算与功率相关度系数对应[0091]首先，终端210与终端230之间通过服务器建立语音通信连接，终端230的麦克风310采集远端的第一语音信号，并通过服务器向本地侧终端210发送所采集的第一语音信放信号输出的语音信号经过在环境中反射等原因产生回声信号，并且该回声信号被终端放时所产生回声的第二语音信号，第二语音信号包括扬声器320发出的线性回声信号和非器向终端230输出进行回声处理后的语音信号，这时的非线性抑制处理并不能完全或较好号在各个频点的增益调整系数进行抑制调节，而使抑制调节后的播放信号驱动扬声器320生回声的第二语音信号，第二语音信号包括扬声器320发出的线性回声信号和非线性回声[0098]回声处理单元530，用于对第二语音信号进行回声处理得到对应于第一语音信号[0099]抑制调节单元540，根据第一语音信号和残差信号的相关度对第一语音信号进行[0100]在一个实施例中，由语音获取单元510所获取的第一语音信号包括但不其他用户了避免由第一语音信号在播放时所产生的回声信号的影响，语音采集单元520获取该回声节单元540可以根据第一语音信号和残差信号的相关度而判断回声信号中非线性失真信号[0105]在一个实施例中，相关度计算单元610对所获取的第一语音信号和残差信号进行[0109]采用线性函数的关系能够更好地针对所获取的残差信号的非线性回声成分对第一语音信号的增益进行调节，但是由于考虑到针对不同终端的扬声器非线性失真特性不[0114]本实施例中增益调节参数包括三级，其中第一增益值>第第三增益值根据实际情况而制定，为了避免影响语音通话质量，第三增益值一般需大于[0119]线性叠加单元730，用于对线性回声信号进行反相处理并与对齐后的第二语音信[0120]在一个实施例中，自适应滤波单元720将所获取的第一语音信号进行自适应滤波是提供终端210和终端230语音通话支持的独立服务器或者是多个服务器组成的集群服务[0123]参照图9所示，语音信号处理装置可以应用于如图2所示的应用环境，包括终端本实施例中的语音信号处理装置也可以应用于只有终端或只由终端和服务器组成的应用和麦克风310，语音输入端330和语音输出端340可以统一为具有上下行收发功能的语音信此扬声器320输出的回声信号包括线性回声信号和非线[0126]麦克风310获取第一语音信号或增益调整后的第一语音信号在播放时所产生回声后，增益调整模块810根据残差信号与第一语音信号的相关度对所获取的第一语音信号进号中容易导致扬声器320发出非线性回声信号的部分进行了抑制调整，这样能够抑制当前调整模块830用于将麦克风310采集的第二语音信号与所获取的第一语音信号进行对齐及时延调整，线性叠加模块850将时延调整后的第二语音信号和自适应滤波后取反的第二语[0129]在一个实施例中，时延调整模块830为延时器件，可以为模拟延时器或数字延时[0130]增益调整模块810可以为对第一语音信号的时域信号的增益进行抑制调节，也可以为对第一语音信号的频域信号的增益进行抑制调节，增益调整模块810预先建立相关度可以得出具体的增益调节参数，增益调节参数对应于残差信号中的非线性回声信号部分，增益调节参数可以抑制第一语音信号中容易使扬声器320产生非线性回声信号的部分，本容易使扬声器320产生非线性回声的部分信号的幅度，在对当前第一语音信号进行抑制调以设置额外的处理器进行处理，将相关度的处理结果反馈至增益调整模块810对第一语音语音信号在频域上各频点对应的增益，由于扬声器320的非线性失真问题可能只是针对某个频点出现或者针对某个频点较为明显，通过对第一语音信号部分频点的增益进行抑制，节参数为第一语音信号在频域上各频点对应[0134]采用线性函数的关系能够更好地针对所获取的残差信号的非线性回声成分对第一语音信号的增益进行调节，但是由于考虑到针对不同终端的扬声器320非线性失真特性[0138]本实施例中增益调节参数包括三级，其中第一增益值>第第三增益值根据实际情况而制定，为了避免影响语音通话质量，第三增益值一般需大于[0141]实现上述实施例中语音信号处理方法所需的非暂态软件程序以及指令存储在存置或如图9所示的语音信号处理装置或如图10所示的语音信号处理装置。其中终端可以是可以根据实际的需要选择其中的部分或者全部模块来实现本[0146]以上是对本