CN113963703B 一种音频编码的方法和编解码设备 （华为技术有限公司）

本申请提供了一种音频编码方法和编码设码参数用于表示该高频带信号的音调成分的信码参数进行码流复用，获得该当前帧的编码码2根据所述高频带信号和所述低频带信号进行第一编码，以获得所述根据所述高频带信号进行第二编码，以获得所述当前帧的第二编码参根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进行调对所述第一编码参数、所述第二编码参数和所述第三编码参数进行所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进根据所述当前频率区域的音调成分的数量信息，对所述当前频率区若所述当前频率区域的音调成分的数量信息满足第一预设条件所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进根据所述当前频率区域的音调成分标志信息，对所述当前频率区域述音调成分标志信息用于标志所述当前频率区域是否存在音3若所述当前频率区域的音调成分标志信息的值为第一预设值，则其中，所述当前频率区域的音调成分标志信息的值为第一预8.根据权利要求3至7中任一项所述的方法，其将所述当前频率区域的频带扩展处理后的高频带信号频谱值设置为第或者，对所述当前频率区域的频带扩展处理后的高频带信所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进根据所述当前频率区域的音调成分的位置信息，对所述当前频率区所述根据所述当前频率区域的音调成分的位置信息，对所述当前频若所述当前频率区域的音调成分的位置信息满足第二预设条将所述当前子带的频带扩展处理后的高频带信号频谱值设置为第二或者，对所述当前子带的频带扩展处理后的高频带信号4根据所述当前帧的编码速率，确定起始频率区域，所述起始频率区对所述频带扩展处理后的高频带信号频谱进行调整的频率范围内序号最小的频所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进从所述起始频率区域开始，根据所述高频带信号的音调成分的信息，对若所述当前帧的编码速率满足第三预设条件，则所述起始频率若所述当前帧的编码速率不满足第三预设条件，则所述起根据所述当前帧的编码速率，确定第一频率区域范围，所述所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进在所述第一频率区域范围内，根据所述高频带信号的音调成分若所述当前帧的编码速率满足第三预设条件，则所述第一频率区域范围为第一范围；若所述当前帧的编码速率不满足第三预设条件，则所述第一频率区域范围为第二范所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进根据当前频率区域的频带扩展处理后的高频带信号频谱，确定当前频若当前频率区域属于所述第一频率区域范围，所述根据所述信息对频带扩展处理后的高频带信号频谱进行调整，以获得调整后的高频带信号的频谱，根据所述高频带信号的音调成分的信息，对所述当前频率区域的5获取单元，用于获取音频信号的当前帧，所述音频信号的处理单元，用于根据所述高频带信号和所述低频带信号进行第一编码所述处理单元还用于根据所述高频带信号进行第二编码，以获得所述当前所述处理单元还用于根据所述高频带信号的音调成分的信息对频带扩展处理后的高所述处理单元还用于根据所述调整后的高频带信号的频谱进行第三编码所述处理单元还用于对所述第一编码参数、所述第二编码参数和所述根据所述当前频率区域的音调成分的数量信息，对所述当前频率区若所述当前频率区域的音调成分的数量信息满足第一预设条件根据所述当前频率区域的音调成分标志信息，对所述当前频率区域述音调成分标志信息用于标志所述当前频率区域是否存在音6若所述当前频率区域的音调成分标志信息的值为第一预设值，则其中，所述当前频率区域的音调成分标志信息的值为第一预将所述当前频率区域的频带扩展处理后的高频带信号频谱值设置为第或者，对所述当前频率区域的频带扩展处理后的高频带信根据所述当前频率区域的音调成分的位置信息，对所述当前频率区若所述当前频率区域的音调成分的位置信息满足第二预设条将所述当前子带的频带扩展处理后的高频带信号频谱值设置为第二或者，对所述当前子带的频带扩展处理后的高频带信号在所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进7从所述起始频率区域开始，根据所述高频带信号的音调成分的信息，对若所述当前帧的编码速率满足第三预设条件，则所述起始频率若所述当前帧的编码速率不满足第三预设条件，则所述起在所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱进在所述第一频率区域范围内，根据所述高频带信号的音调成分若所述当前帧的编码速率满足第三预设条件，则所述第一频率区域范围为第一范围；若所述当前帧的编码速率不满足第三预设条件，则所述第一频率区域范围为第二范在所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号频谱若当前频率区域属于所述第一频率区域范围，对所述当若当前频率区域的频带扩展处理后的高频带信号频谱中，频谱8所述处理器用于读取指令以执行权利要求1至18中任一项所述的音频9高频带信号频谱进行第三编码而造成的高频带信号的音调成分后的高频带信号频谱进行第三编码而造成的高频带信号的音调成分的数量信息，对所述当前频率区域的频带扩展处理后的高频带信号频谱进行调整，后的高频带信号频谱进行第三编码而造成的高频带信号的音率区域的音调成分标志信息的值为第一预设值表示所述当前频率区域存在音后的高频带信号频谱进行第三编码而造成的高频带信号的音息满足第二预设条件，则对所述当前子带的频带扩展处理后的高频带信号频谱进行调整，处理后的高频带信号频谱进行调整，以获得所述当前子带的调整后的高频带信号的频谱，频率区域为需要判断是否对所述频带扩展处理后的高频带信号频谱进行调整的频率范围第一频率区域范围为需要判断是否对所述频带扩展处理后的高频带信号频谱进行调整的调成分标志信息用于标志所述当前频率区域是否存在音调理后的高频带信号频谱进行调整，以获得所述当前频率区域的调整后的高频带信号的频始频率区域为需要判断是否对所述频带扩展处理后的高频带信号频谱进行调整的频率范第一起始频率区域与所述第二起始频率区域对应的述第一频率区域范围为需要判断是否对所述频带扩展处理后的高频带信号频谱进行调整[0047]在所述根据所述高频带信号的音调成分的信息对频带扩展处理后的高频带信号域范围为需要判断是否对所述频带扩展处理后的高频带信号频谱进行调整的频率区域的所述装置执行上述第一方面或第一方面的任意可能的实现方取指令以执行上述第一方面或第一方面的任意可能的质存储有根据如上述第一方面或第一方面的任意可能的实现方式中的方法获得的编码码[0062]图9是本申请实施例的一种获取当前频率区域的第二编码参数的方法的示意性流[0069]下面对本申请实施例的一种应用场景进行介绍，图1示出了本申请实施例的一种应用场景100的示意图。图1所示的是本申请实施例在终端设备侧应用的系统架构示意图。130和无线或者有线网络通信设备140。其中，所述第一终端设备110和所述第二终端设备行在数字信道中传输信号。接收端侧的所述无线或者有线网络通信设备140通过数字信道[0070]应理解，所述无线或者有线网络通信设备130和所述无线或者有线网络通信设备[0071]图2示出了本申请实施例的另一种应用场景200的示意图。图2所示的是本申请实[0072]图3示出了本申请实施例的另一种应用场景300的示意图。图3所示的是本申请实[0074]图4示出了本申请实施例的一种应用场景400的示意图。图4所示的是本申请实施所述第一终端设备410为发送端设备，所述第二终端设备420为接收端设备为例进行说明，在音频通信中第一终端设备410中的音频采集模块用于采集音频，多声道编码器将采集到的所述无线或者有线网络通信设备430进行在数字信道中传输信号。接收端侧的所述无线[0075]应理解，所述无线或者有线网络通信设备430和所述无线或者有线网络通信设备[0076]图5示出了本申请实施例的另一种应用场景500的示意图。图5所示的是本申请实[0077]图6示出了本申请实施例的另一种应用场景600的示意图。图6所示的是本申请实中的音频编码模块(AudioEncoding)和音频解码模块(AudioDecoding)。如下图7所示中装encapsulation)之后发送(Delivery)到解码端，解码端首先进行解包(File/Segment解解码后的音频信号进行音频双耳渲染(Audiorendering)处理，渲染处理后的信号映射到收听者耳机(headphones)上，可以为独立的耳机也可以是HTCVIVE等眼镜设备上的耳机，对解码后的视频信号和图像信号进行视频双耳渲染(videorendering)处理，渲染处理后无线本地环路(WirelessLocalLoop，WLL)站、个人数字助理(PersonalDigital(SubscriberStation)，移动站(MobileStation)、移动台(Mobile)、远程站(RemoteStation)、远程终端(RemoteTerminal)、接入终端(AccessTerminal)、用户终端(User[0083]而如上介绍的各种终端设备，如果位于车辆上(例如放置在车辆内或安装在车辆内)，都可以认为是车载终端设备，车载终端设备例如也称为车载单元(on-boardunit，[0085]本申请实施例中的接入网设备可以是用于与终端设备通终端与接入网的其余部分之间的路由器，其中接入网的其余部分可包括网际协议(IP)网络。网络设备还可协调对空中接口的属性管理。例如，接入网设备可以是全球移动通讯(GlobalSystemofMobilecommunication，GSM)或码分多址(CoAccess，CDMA)中的基站(BaseTransceiverStation，BTS)，也可以是宽带码分多址系统中的演进型基站(evolvedNodeB，eNB或eNodeB)，还可以是云无线接入网络(cloud(NodeB，NB)、基站控制器(basestationcontroller，BSC)、基站收发台(base[0088]核心网设备可以是核心网网元，例如接入与移动性管理功能(AccessandMobilityManagementFunction，AMF)实体、会话管理功能(SessionManagement和移动性控制，包括注册管理(registrationmanagement，RM)和连接管理(connectionsystemformobilecommunications，GSM)系统、码分多址(codedivisionmultiple统、通用分组无线业务(generalpacketradioservice，GPRS)、长期演进(longtermtelecommunicationsystem，UMTS)、全球互联微波接入(worldwideinteroperability维音频编解码器利用通道间的相关性将多路信号下混，得到下混信号和多通道编码参数。VoiceServices，EVS)音频编解码器，还是动态图像专家组高效高级音频编码(Moving没有考虑到第一编码方法中已经能够保留一部分音调成分并在第三编码中对其进行编码，一种音频处理的方法800的示意性流程图，该方法800可以应用在图1至图7所示的场景中，[0102]高频带信号和低频带信号是相对的，例如低于某个频带阈值的信号为低频带信处理进行重建的频谱成分，或者包括频带扩展处理前的信号频谱中幅度较大的频谱成分。述第二编码参数用于表示所述高频带信号的音任意3个频率区域；需要获取高频带参数的频率区域数量也可以是根据具体算法计算得到所述音调成分的幅度参数为例进行进一步描述，如高频带信号对应的高频带包括5个频率区域，下面通过描述在频率区域1中确定音调成分的位置数量参数以及所述音调成分的幅[0124]峰值筛选的具体方式可以是根据当前频率区域的频带扩展的频谱保留标志信息[0127]例如，可以是对所述当前频率区域中子带序号相同的候选音调成分进行合并处域的合并处理后的候选音调成分的信息获得所述当前频率区域的目标音调前频率区域中的候选音调成分对应的子带序号；若所述当前帧的当前频率区域的第n个候选音调成分的位置信息和所述前一帧的当前频率区域的第n个候选音调成分的位置信息满足预设条件，且所述当前帧的当前频率区域的第n个候选音调成分对应的子带序号和所述前一帧的当前频率区域的第n个候选音调成分对应的子带序号不同，则对所述当前帧的当前频率区域的第n个候选音调成分的位置信息进行修正，以获得所述当前频率区域的目标音调成分的信息，所述第n个候选音调成分为所述当前频率区域中的任意一个候选音调成[0134]所述根据所述高频带信号的音调成分的信息对所述频带扩展处理后的高频带信后的高频带信号频谱进行第三编码而造成的高频带信号的音[0140]可选的，所述第一预设条件为所述当前频率区域的音调成分的数量处于第一区[0141]可选的，所述对所述当前频率区域的频带扩展处理后的高频带信号频谱进行调理进行重建，不能进行频带扩展编码，需要在后续第三编码过程中进行编码，其余4kHz-值设置为零，以便在后续第三编码的过程中不再进行编码，避免第二编码和第三编码对[0146]可选的，所述对所述当前频率区域的频带扩展处理后的高频带信号频谱进行调[0147]加权处理可以是以预设的加权系数对当前频率区域内所有频点的频谱值进行加可以根据频率区域的音调成分标志信息频带扩展处理后的高频带信区域的音调成分标志信息的取值为0时表示当前频率区域存在音调[0152]可选的，所述对所述当前频率区域的频带扩展处理后的高频带信号频谱进行调后的频谱值设置为第二预设值，以获得所述当前频率区域的调整后的高频带信号的频谱；域的每个频点对应的频带扩展处理后的频谱值乘以预设的加权系数0.5，作为当前频率区后的高频带信号频谱进行第三编码而造成的高频带信号的音后的高频带信号频谱进行调整，以获得所述当前频率区域的调整后的高频带信号的频谱，的频率区域均分了5个子带，其中，5000Hz-5200Hz为子带1，5200Hz-5400Hz为子带2，5400Hz-5600Hz为子带3，5600Hz-5800Hz为子带4，5800Hz-6000Hz为子带5，检测到5kHz-高频带信号频谱进行第三编码而造成的高频带信号的[0166]上述实施例具体描述了在编码时编解码设备根据所述高频带信号的音调成分的[0172]所述第一编码参数、所述第二编码参数和所述第三编码参数可以参考编码方法[0173]S1030，根据所述第一编码参数和所述第三编码参数得到所述当前帧的第一高频[0178]此处以在一个频率区域中根据音调成分的位置数量参数以及所述音调成分的幅度参数获得当前帧的重建高频带信号为例进理后的高频带信号频谱进行调整的频率区域的[0182]应理解，在确定了所述当前帧需要判断是否进行频谱调整的频率区域的范围之据所述高频带信号的音调成分的信息判断是否对对所述频带扩展处理后的高频带信号频据所述高频带信号的音调成分的信息，对所述频带扩展处理后的高频带信号频谱进行调确定各个编码速率对应的需要判断是否对频带扩展处理后的高频带信号频谱进行调整的[0191]当然根据不同的编码速率确定各个速率对应的需要判断是否对频带扩展处理后与所述第二起始频率区域对应的频率范围不相同表示所述所述第一起始频率区域对应的频率范围与所述第二起始频率区域对应的频率范围完均编码速率为bitrate_ch＝bitrate_tot/n_channels。若每个通道的平均编码速率大于没有频率区域需要根据高频带信号的音调成分的信息，对频带扩展处理后的频谱进行调域的频带扩展处理后的高频带信号频谱的绝对值大于T的频点的数量小于10，当前频率区的取值可以设置为当前频率区域的频带扩展处理后的高频带信号频谱绝对值的平均值的3的编码速率来确定频谱保留优先的频率区域数量或者确定音调重建优先的频率区域数量。[0205]下面通过两个具体的实施例进一步说明根据当前帧的编码速率来确定频谱保留频谱进行调整的频率区域的最小序号(序号从0开始)。tone_cnt[p]为第p个tile的音调成分的数量信息，tile[p]为第p个tile的起始频点，tile[p+1]为第p+1个tile的起始频点，[0224]其中，num_tiles_reconFirst为采用音调重建优先策略的频率区域数量，num_[0237]当该装置1100为终端设备或者该装置为接入网设备或核心网设备时，收发单元器可以是一个通用中央处理器(CPU)，微处理器，特定应用集成电路(Application[0239]当该装置1100为芯片时，收发单元1130可以是输入和/或输出接口、管脚或电路等。该处理单元1110可执行存储单元存储的计算机执行指令，以使该装置可以执行方法述当前帧的第二编码参数，所述第二编码参数用于表示所述高频带信号的音调成分的信的值为第一预设值，则对所述当前频率区域的频带扩展处理后的高频带信号频谱进行调调成分标志信息的值为第一预设值表示所述当前频率区域息对频带扩展处理后的高频带信号频谱进行调整，以获得调整后的高频带信号的频谱之息对频带扩展处理后的高频带信号频谱进行调整，以获得调整后的高频带信号的频谱之信号，以及根据所述第一低频带信号进行频带扩展得到的扩展高频带信号中的至少一种；