CN119418711A 一种面罩内语音增强方法、系统、存储介质及程序产品 （南京正泽科技股份有限公司）

路32号软件谷科创城产业园区3号南一音频样本和未佩戴面罩状态下的第二音频样2采集多个目标对象在佩戴面罩状态下的第一音频样本和未佩戴面罩状态下的第二音根据所述第一音频样本和所述第二音频样本，确定面罩效应下获取工作场景中目标用户的实时音频信号，并对所述实时音频信号进行降噪预处理，根据预设用户配置调整所述增强音频信号，得到输出音频信号在根据所述环境参数确定所述工作场景处于异常状态时，获取根据所述环境参数和所述补偿参数对所述语音增强模型的处理采集多种不同类型面罩的材质影响参数，并基于所述材质影响参获取所述目标对象的发声特征数据，并基于所述面罩材质特征库和所述发声特征数实时获取面罩的佩戴类型和目标用户的身份信息，根据将所述时变谱特征矩阵输入至预设频谱映射模型，得到频谱包络特征和谐波结构特根据所述频谱补偿参数对所述频谱包络特征和所述谐波结构解析所述频谱优化特征，确定所述频谱优化特征在不同频段的能量根据所述能量分布特征和所述相位特征，计算频率响应偏移量和3采集所述目标用户的语音习惯数据，并根据所述语音习惯数据从所述接收用户输入的实时场景需求，并根据所述实时场景需求调整对所述目标用户的实时语音进行分帧分析，提取包括基频轨迹、共根据所述声学特征和所述韵律特征构建所述目标用户的用户语音画将所述语音习惯数据输入至模板匹配引擎，计算与所述用户配置模板实时采集所述目标用户的语音反馈数据，并输入所述语在所述多个质量指标得分中的任意一个不满足预设指标要求4[0003]相关技术中，采用的语音增强方案主要通过设置降噪麦克风阵列来采集语音信[0004]然而，相关技术中的语音增强方法难以充分考虑面罩内5[0009]在上述实施例中，语音增强系统通过监测环境参数并在异常状态下应用补偿参6得该语音增强系统执行如第一方面以及第一方面中任一可能的实现1、由于采用了面罩状态下的第一音频样本和未佩戴状态下的第二音频样本对比停顿模式等韵律特征构建用户语音画像，所以能够全面准确地描述用户的个性化语音特78和声音特征的人员；第一音频样本是指在受控环境下采集的佩戴面罩状态下的语音数据，9[0052]语音重建解码器基于面罩补偿信息还原清晰语音。整个模型的目标函数可表示1Lrecon+2Lspec+3Lperc；其中Lrecon表示时域重建损失，用于保证信号的整体还原质量；Lspec为频谱损2控网络融合各个专家的输出结果。混合专家系统采用动态路由机制，包含多个专家网络和[0077]在结合上述场景后，下面对本实施提供的方法进行进一步的更具体的流程叙在验证集上的映射准确度和声学参数预测误差达到预设特征向量与声学传递函数之间的非线性映射关系，实现特征空间到声学参数空间的转换。[0097]需要说明的是，该预设频谱映射模型在训练时输入大量配对的无面罩/戴面罩语后输入到异常检测器。异常检测器基于高斯混合模型计算当前状态与正常工况的偏离程偿模型通过大量实验数据训练得到，能够准确描述环境参数变化对声学特性的影响规律。[0130]在一些实施例中，语音增强系统会构建包含多个反馈指标的解调器等的网络接口卡的通信部分309。通信部分309经由诸如因特网的网络执行通信处