GC基础使用教程 10

实训目标课前讨论（1）你是否曾遇到过一段音频内容因背景嘈杂、人声与音乐混杂或音调不合适

而影响使用的问题？（2）你当时尝试过或希望用什么方法来解决这种问题？这些方法的效果如何？（3）现有一段在咖啡馆录制的访谈音频，希望你将其优化为清晰的纯净人声音

频，并调整嘉宾语速。你认为理想的处理流程应该包含哪些关键步骤？任务7.1AIGC音频优化技术介绍——定义AIGC音频优化技术

AIGC音频优化技术利用AIGC工具对已有音频信号进行质量增强、缺陷修复、内容分离或属性变换等处理，以提升其听觉体验、信息价值或适配特定应用场景。

核心特征：从有到优或从混到分技术范畴：主要包括智能修复与增强、内容解构与分离、属性智能变换、

自动化后期处理任务7.1AIGC音频优化技术的发展历程

AIGC音频优化技术的发展先后经历传统数字信号处理主导、统计模型与浅层机器学习介入、深度学习革命与神经网络声码器、生成式模型主导与端到端系统成熟等4个阶段。

（1）传统数字信号处理主导阶段（1999年以前）：该阶段主要依赖经典的信号处理方法，如基于傅里叶变换的谱减法降噪、基于线性预测的语音增强等。这些方法计算效率高，但在复杂场景下效果有限，易引入新的失真。

（2）统计模型与浅层机器学习介入阶段（2000-2012年）：该阶段开始利用高斯混合模型、非负矩阵分解等统计方法进行简单的音源分离或噪声建模，效果有所提升，但模型表达能力有限。

（3）深度学习革命与神经网络声码器阶段（2013-2018年）：深度学习模型的出现不仅革新了语音合成，其条件生成思想也为音频优化开辟了新路径。卷积神经网络和循环神经网络在语音增强任务上取得显著突破。

（4）生成式模型主导与端到端系统成熟阶段（2019年至今）：AIGC和扩散模型成为主流。Transformer架构也开始被用于建模音频的长程依赖关系，提高处理的精度和增强上下文感知能力。当前的技术趋势是构建多功能、一体化的端到端优化系统，其能够根据指令同时完成多种优化任务。任务7.1AIGC音频处理技术的五大应用场景

AIGC音频优化技术的典型应用场景包括专业内容与媒体后期制作、通信与远程协作、消费电子与个人娱乐、文化遗产保护与公共安全、辅助技术与无障碍服务等。

1.专业内容与媒体后期制作：修复现场录音缺陷，分离对白与背景音以便后期混音或配音，为老影片或音乐进行音质重塑；自动化清理录音中的口齿声、呼吸声、环境噪声，并统一多期节目的音质与响度。

2.通信与远程协作：在视频会议、在线教育、游戏语音中，实时抑制背景噪声、键盘声、回声，并增强人声清晰度；提升智能客服等场景中嘈杂环境的语音识别准确率，保障交互流畅。

3.消费电子与个人娱乐：实现智能手机、耳机的通话降噪、环境音透明模式、个性化的听力增强与音频后处理；为音乐流媒体、用户生成内容（UGC）平台用户提供“一键母带”“伴奏提取”“人声消除”等便捷的音频自助优化工具。

4.文化遗产保护与公共安全：对老唱片、旧磁带录音等历史档案进行降噪、修复与数字化增强；增强司法、安防场景中监控录音、报警电话中关键语音信息的可懂度，辅助取证与分析。

5.辅助技术与无障碍服务：在复杂声学场景中，动态分离并放大目标说话人声音，抑制干扰噪声，为听障人士提供支持。任务7.2声音降噪

假设你是一位数字媒体技术专业的学生，你录制了一首歌曲，得到了音频文件，但是由于环境嘈杂，录音中混杂着风扇声、键盘声和车流声。你想在不购买昂贵专业设备的情况下，快速提升音频质量，对歌曲的声音进行降噪处理。本节结合声音降噪技术，利用AIGC工具辅助进行声音降噪处理。

意义：声音降噪的意义在于实现声音重建范式突破、增强音频信号的有效信息密度、提升创作灵活性及作品质量、提升听觉体验与沟通效率等。

（1）实现声音重建范式突破：传统降噪方法基于噪声的统计假设，在抑制噪声的同时易导致目标声音失真。以深度神经网络为核心的AI降噪模型，能智能理解并建模声音与噪声的复杂特征，在去噪强度与音质保真度间取得更优平衡。

（2）增强音频信号的有效信息密度：有效的降噪能显著提高语音的可懂度或音乐元素的辨识度，从本质上提升音频载体中有效信息的信噪比，为后续的语音识别、内容分析、高质量混音等处理步骤奠定坚实基础。

（3）提升创作灵活性及作品质量：AI降噪能挽救因意外噪声污染的宝贵录音素材，使在非专业录音环境下采集的音频素材得以被利用，极大程度地降低专业级音频制作对录音棚等物理环境的依赖，提升创作的灵活性与可能性。

（4）提升听觉体验与沟通效率：在通信、在线会议、媒体播放等场景中，声音降噪技术直接消除背景杂音、回声、电流声等干扰，优化人机、人人交互的听觉通道，提升信息传播效率与用户体验。

声音降噪是音频信号处理中的一项核心技术，旨在从包含噪声的混合音频信号中，尽可能地分离并抑制噪声，从而增强或恢复目标声音的清晰度与纯净度。随着生成式人工智能技术的发展，基于深度学习的降噪技术已成为主流，实现从“滤波”到“智能重建”的范式跃迁。

AIFooler是在线AI音频处理工具，以人声与伴奏分离为核心功能，无须安装软件或注册即可使用。AIFooler利用基于U-Net架构的深度学习算法，能够高效、精准地将音频中的歌声与背景音乐分离，在复杂编曲场景下分离准确率可达92%以上。AIFooler降噪功能采用WaveNet，能有效去除环境噪声；所有核心功能均为完全免费提供。AIFooler支持MP3、WAV、FLAC等多种常见音频格式，操作流程简单，通常在1分钟内即可完成处理。任务7.2声音降噪技术及工具——AIFooler任务7.2

AIFooler声音降噪实训——AIFooler

步骤一：在浏览器中打开AIFooler官网，单击页面左下方的“点击登录”按钮，如图中的“1”所示。

步骤二：此时会自动弹出“微信扫一扫登录”页面，并显示二维码，如图所示。任务7.2

AIFooler声音降噪实训——AIFooler

步骤三：使用微信App的扫一扫功能扫描二维码，即可成功登录AIFooler，此时页面中的“点击登录”按钮变成“任务中心”按钮，如图中的“1”所示。这时就可以使用AIFooler提供的功能了任务7.2

AIFooler声音降噪实训——AIFooler

步骤四：选择页面左侧的“一键降噪”选项，将自动跳转到“一键降噪”页面，如图所示。在“一键降噪”页面上，单击“选择文件”按钮，如图中的“1”所示，即可从本地硬盘上选择一个音频文件并上传到AIFooler上，用于音频降噪处理。任务7.2

AIFooler声音降噪实训——AIFooler

步骤五：上传前面创作的班歌《数字媒体技术之歌》，成功上传音频文件后页面的显示效果如图所示。在AIFooler上可通过调整音频“去噪前”和“去噪后”的音量来实现降噪，如图中的“1”所示。任务7.2

AIFooler声音降噪实训——AIFooler

步骤六：例如，将“去噪前”的音量调整到最小，如图中的“1”所示，单击页面左下方的“

”按钮，如图中的“2”所示，即可听到AIFooler对该音频文件进行降噪后的声音。任务7.2

AIFooler声音降噪实训——AIFooler

步骤七：完成音频降噪处理后，单击页面右下方的“下载”按钮，如图中的“1”所示，即可下载降噪后的音频文件到本地硬盘上。任务7.2

AIFooler声音降噪实训——AIFooler

拓展：AIFooler的音频优化功能相当强大，在页面左侧的菜单栏中提供丰富的便捷操作选项，包括“人声分离”“一键降噪”“音轨分离”“提取音频”等，帮助用户快速优化音频，如图中的“1”所示。例如，对音频文件《数字媒体技术之歌》进行“音轨分离”操作，可分离出人声、鼓、贝斯、吉他、钢琴、其他等音乐元素，如图中的“2”所示。任务7.2

AIFooler声音降噪实训——AIFooler任务7.3声音升降调

假设你是一位动漫制作技术专业的学生，你为一部原创动画短片录制了一首主角的原唱歌曲。但后期发现，为动画短片中一个“小精灵”角色配音时，本音不够“尖细可爱”。你需要将原唱歌曲的声音升高（或降低）音调，以匹配角色的形象。本节结合声音升降调技术，利用AIGC工具辅助进行声音升降调处理。

意义：声音升降调的意义在于实现音高与音色的解耦与高质量重建、拓展音频素材的适配性与创意表达空间、提升制作效率与流程容错性、实现内容个性化适配与包容性访问等。(1)实现音高与音色的解耦与高质量重建：传统时域或频域算法难以同步调整声音的共振峰等决定音色的频谱特征，易导致音色改变或产生相位瑕疵。基于深度学习的生成模型，能学习音高变化与音色保持之间的复杂非线性映射，智能地维持或自适应调整谐波结构与音色特征，实现更自然、保真的变调效果。(2)拓展音频素材的适配性与创意表达空间：创作者可以轻松地将一段人声或乐器音频调整至任何所需的音调，以适应不同的和声、歌手音域或场景氛围，而无须重新录制，为音乐创作、影视配音和内容再创作等提供强大的灵活性，催生如“一键转调合唱”“风格化音高校准”等创意手法。(3)提升制作效率与流程容错性：在音乐制作中，可快速尝试不同音调下的编曲效果；在影视后期中，可精细调整配音与口型的匹配度，或修正现场演唱的微小音准问题。AI升降调技术能非破坏性、高质量地完成音调调整，简化后期制作流程，并作为一种有效的补救工具，提升整体制作流程的容错率和效率。(4)实现内容个性化适配与包容性访问：基于用户偏好或生理需求，对音频内容进行个性化调整。例如，为听力受损人士提升特定频段的声音清晰度，或为音乐流媒体服务提供根据用户所处环境自动优化音调的功能，体现技术对用户多样性需求的响应，增强数字内容的可及性与包容性。

声音升降调是指通过数字信号处理技术，在保持音频时长基本不变的前提下，系统性地改变其原始音高（基频）的过程。传统方法在改变音高的同时常伴随音色失真与“机器人声”效应。基于AIGC的声音升降调技术，能实现对音高更为精准、自然的变换，同时最大限度地保持原始音色的质感和声音的情感特征。

AIFooler的功能矩阵现已扩展，除人声分离外，还包含一键降噪和升降调等功能。升降调功能融合相位声码器与Transformer架构，可在改变音调的同时保持音频时长与音色。它适用于音乐创作、视频制作、播客剪辑及练唱素材准备等多种场景，旨在降低音频处理的技术门槛，提升创作效率。任务7.3声音升降调——AIFooler任务7.3

AIFooler声音升降调实训——AIFooler

步骤一：成功登录AIFooler后，选择页面左侧的“升降调”选项，如图中的“1”所示。

步骤二：此时将自动跳转到“升降调”页面，如图所示。

步骤三：单击“选择文件”按钮，如图中的“1”所示，即可从本地硬盘上选择一个音频文件并上传到AIFooler中，对该音频文件进行升降调处理。任务7.3

AIFooler声音升降调实训——AIFooler

步骤四：上传前面创作的班歌《数字媒体技术之歌》，成功上传该歌曲后页面的显示效果如图所示。在AIFooler中，可通过调整“PITCH”（音调）和“SPEED”（音速）的滑块来进行升降调，如图中的“1”所示。例如，将“PITCH”的大小从“0.00”调整到“2.00”，如图中的“1”所示，并将“SPEED”的大小从“1.00x”调整到“1.05x”，如图中的“2”所示，单击页“

”按钮，如图中的“3”所示，即可听到AIFooler对该音频文件进行升降调后的声音。任务7.3

AIFooler声音升降调实训——AIFooler

步骤五：单击页面右下方的“下载”按钮，如图中的“1”所示，即可下载调整后的音频文件到本地硬盘上。任务7.3

AIFooler声音升降调实训——AIFooler

拓展：AIFooler的声音优化功能相当强大，在“常用功能”菜单中提供升“降调”“格式转换”“音频裁剪”“音频合并”“均衡器”“录音机”等丰富的便捷操作选项，帮助用户快速对声音进行优化处理，如图中的“1”所示。例如，对音频文件《数字媒体技术之歌》进行“音频裁剪”操作时，AIFooler提供裁剪、移除、撤销、起点、终点等选项，如图中的“2”所示。任务7.3

AIFooler声音升降调实训——AIFooler任务7.4声音分离

假设你是一位数字媒体技术专业的学生，现在你想要利用AIGC工具对一首歌曲进行声音分离操作。本节结合声音分离技术，利用AIGC工具辅助进行声音分离处理。

意义：声音分离的意义在于实现盲源分离的实用化、重塑音频内容再利用流程、推动艺术创意与个人创作、

拓展高级别音频理解与交互等。（1）实现盲源分离的实用化：传统声音分离方法多依赖于先验知识或简单的频谱、空间假设，而以深度神经网络为核心的

模型能自监督地学习不同声源在时域和频域中的深层、非线性特征，显著提升分离精度与

泛化能力，使高质量的盲源分离走向实用。（2）重塑音频内容再利用流程：声音分离技术作为音乐混音、影视声音设计、游戏音频的革命性技术，使工程师可从

成品混音中直接提取干声或特定乐器轨道，极大降低内容修复与重制的门槛与成本，

释放海量历史音频资料的二次创作潜力。（3）推动艺术创意与个人创作：音乐爱好者可轻松地从喜爱的歌曲中提取伴奏进行翻唱或分离出人声进行混音练习。

音乐创作者可将分离出的音效、环境声元素作为素材重组进自己的作品，

推动音乐、短视频创作等领域的平民化与创新。（4）拓展高级别音频理解与交互：清晰、分离的声源是进行精准语音识别、说话人确认、音乐信息检索等高级音频

分析任务的前提。

任务7.4声音分离的四大应用场景

声音分离的典型应用场景包括专业音频制作与媒体内容管理、消费级内容创作与娱乐、通信辅助技术与智能设备、前沿研究与新兴应用。

1.专业音频制作与媒体内容管理：从立体声混音中分离人声、鼓组、贝斯等独立音轨，用于重新平衡、效果处理或采样；从复杂的现场录音或最终混音中分离对白、环境声、特效声，便于独立优化、替换或翻译配音：对历史录音进行声源分离等音频档案修复，提升特定内容的清晰度，或分离出噪声进行处理。

2.消费级内容创作与娱乐：一键生成高质量伴奏或提取人声干声；从现有视频或音频中提取所需的背景音乐、对话或音效，便捷地用于短视频与社交媒体内容创作；将游戏背景音乐、音效与团队语音对话实时分离，便于进行独立音量和效果控制，优化直播观看体验。

3.通信辅助技术与智能设备：在多人智能会议场景中，分离并增强当前发言者的声音，抑制背景噪声和其他声音；辅助听力设备可帮助听障人士在复杂声音环境中聚焦目标说话人的声音，抑制背景噪声；在家庭或车内环境中，智能音箱与车载系统更准确地识别用户的语音指令。

4.前沿研究与新兴应用：在虚拟现实、增强现实或互动媒体场景下动态地对声音对象进行分离，实现基于用户位置和交互的3D音频渲染；从野外录音中分离出不同物种的叫声，用于生物多样性研究和生态环境监测。任务7.4魔音工坊声音分离实训——魔音工坊

步骤一：成功登录魔音工坊官网，选择“人声处理”选项，如图中的“1”所示。

步骤二：此时将自动跳转到“人声处理”页面，选择“音频文件”选项，如图中的“1”所示，将跳转至“音频文件”编辑页面。任务7.4魔音工坊声音分离实训——魔音工坊

步骤三：在“音频文件”编辑页面中单击“上传音频”按钮，如图7-17中的“1”所示，即可从本地硬盘上选择音频文件并上传到魔音工坊中。任务7.4魔音工坊声音分离实训——魔音工坊

步骤四：上传前面创作的班歌《数字媒体技术之歌》，如图中的“1”所示，魔音工坊还提供设置“提取内容”“输出音频文件格式”选项，如图中的“2”所示。任务7.4魔音工坊声音分离实训——魔音工坊

步骤五：设置“提取内容”为“人声”，设置“输出音频文件格式”为“MP3”，如图中的“1”所示，单击“提取文件”按钮，如图7-19中的“2”所示，即可对音频进行人声分离处理。任务7.4魔音工坊声音分离实训——魔音工坊

步骤六：魔音工坊平台完成人声分离处理，生成结果如图所示。调节好音量，单击“

”按钮，如图中的“1”所示，即可播放人声分离处理后的“人声”音频。