人工智能基础与应用课件 第二章 模块三 智声灵动：生成式人工智能的语音合成与交互革命

FundamentalsandApplicationsofArtificialIntelligence第二章

智慧探索，解码生成式人工智能核心原理模块三

智声灵动：生成式人工智能的语音合成与交互革命01聆听科技之音共探声音魅力02一、语音生成的概念03二、语音合成技术的工作原理04三、语音生成的实际应用场景目录Content05聆听科技之音

共探声音魅力智声灵动：生成式人工智能的语音合成与交互革命Part01导入AI创作一首歌曲，用AI帮我写歌词，努力拼搏后获胜的喜悦。这首歌是国风音乐风格，传达放松的情绪，使用女声音色。音乐链接：豆包/music-sharing?vid=v0369cg10004d25g8avog65vmhmj21b0&share_id=14339960191223554&task_id=0&source_type=web一、实验目的通过真人朗读和AI朗读的对比实验，帮助学生理解人类朗读与AI语音合成在语音自然度、情感表达、语调和节奏等方面的差异。通过实践操作和对比分析，提升学生对语音合成技术的理解，同时培养学生的语言表达能力和分析能力。【应用探索】聆听科技之音

共探声音魅力生成式人工智能不仅赋予机器以声音，更注入了情感与智慧，使其成为能够与人类心灵对话的智能伙伴。它通过精准的语言模仿和情感表达，打破了人机交互的界限，让沟通变得更加自然、流畅且富有温度。【应用探索】聆听科技之音

共探声音魅力二、实验任务首先，每组同学准备一段约300字的文本，内容健康积极，适合朗读，然后进行真人朗读并录音，注意保持自然流畅的语调和情感表达，确保录音质量清晰。接着，使用语音合成工具（如语音合成助手TTS或百度语音合成）输入相同的文本，生成AI朗读的语音，选择合适的主播声音，调整语速、语调和音量，使其更接近自然朗读，并保存生成的语音文件。最后，播放真人朗读和AI朗读的录音，从语音自然度、情感表达、语调变化和节奏控制等方面进行对比分析，总结两者的特点。【应用探索】聆听科技之音

共探声音魅力案例文本同学们，当你用手机刷短视频时，有没有想过，那些酷炫的画面，可能根本不是真人拍摄的？是的，AI时代已经来到我们身边！在浙江的一家服装厂，工人们不再手动裁剪布料，而是用AI设计软件，3分钟生成100款新衣样式；在上海的汽车4S店，销售顾问通过AI数字人，同时接待20位顾客咨询。这些不是科幻电影，而是正在发生的现实！作为学生，我们可能会问：机器人会不会抢走我们的饭碗？但老师要告诉大家一个振奋的事实：全国已有300多所职业院校开设了"AI应用"专业，学习这些技术的师兄师姐，刚毕业就能拿到6000元以上的月薪！AI不是对手，而是我们最好的工具。学汽修的同学，可以用AI诊断汽车故障，准确率比老师傅还高；学烹饪的同学，能让AI设计营养菜单，成为智能厨房管理员；学电商的同学，用AI自动生成商品视频，一个人就能运营整个直播间！在广东，有位毕业的学长，靠着自学AI绘图，现在为游戏公司设计角色，月入过万；在山东，一群学生用AI帮农民检测果园病虫害，获得了全国创业大赛金奖。同学们，世界上最厉害的AI，也比不上会使用AI的人类大脑。记住，机器替代的是重复劳动，但永远替代不了我们的创造力！把握AI机遇，你的未来，一定会比想象的更精彩！【应用探索】聆听科技之音

共探声音魅力三、思考与讨论本次实验将让学生更深入地理解真人朗读与AI朗读的差异，探讨AI技术在语音合成领域的优势与局限，并思考如何更好地结合两者的优势，推动语言表达和艺术创作的发展。讨论一下，在不同的应用场景中，真人朗读和AI朗读分别适合哪些领域？【应用探索】聆听科技之音

共探声音魅力四、实验记录表请根据实验任务的要求，填写实验记录表，记录你的观察和思考。附表：表2-3聆听科技之音共探声音魅力语音生成的概念Part02智声灵动：生成式人工智能的语音合成与交互革命语音生成的概念语音生成技术（TTS）将文字信息转化为自然、流利的口语输出，模拟人类语音的音素、韵律、语调等，广泛应用于智能语音助手、有声读物等领域。打破人机交互界限，让沟通更自然、富有温度，提升用户体验，推动语音交互技术发展。技术核心价值【应用探索】聆听科技之音

共探声音魅力语音合成技术的工作原理Part03智声灵动：生成式人工智能的语音合成与交互革命0102主要任务是识别文本中的每个单词或字符，并确定其基本属性。在细节上包括对文本进行分词处理，将句子拆解为独立的词汇单元。例如，将“我喜欢吃苹果”分解为“我”“喜欢”“吃”“苹果”，这有助于后续的音素转换和语义理解。1、词汇分析语音合成技术的工作原理文分本析主要任务是解析文本的语法结构，明确句子的组成成分。在细节上分析句子的主谓宾结构、修饰语等，确定每个词汇在句子中的语法角色。例如，在“我喜欢吃苹果”中，“我”是主语，“喜欢”是谓语，“吃苹果”是宾语，这种结构分析有助于生成符合语言习惯的语音。2.语法分析主要任务是理解文本的深层含义，捕捉句子的意图和情感。在细节上通过语义分析，计算机可以识别出“我喜欢吃苹果”表达的是一种喜好，从而在语音合成时采用合适的语调和节奏来表达这种情感。3.语义分析0102主要任务是将文本中的每个字符或词汇转换为对应的音素序列。在细节上，例如“苹果”在汉语拼音中对应的是“píngguo”，音素转换就是将文字映射到这些基本的发音单元上，这是语音合成的关键步骤。4.音素转换语音合成技术的工作原理文分本析主要任务是处理文本中的特殊元素，如多音字、数字、缩略语等。在多音字处理时，根据上下文确定多音字的正确发音。例如，“行”在“银行”中读作“háng”，而在“行走”中读作“xíng”。在数字转换时，将数字转换为对应的读法。例如，“2024”转换为“二零二四”。在缩略语处理时，将缩略语展开为全称。例如，“NASA”转换为“美国国家航空航天局”。通过这些细致的分析和处理，文本分析不仅帮助计算机完全理解输入文本，还为后续的语音合成环节提供了必要的发音提示，确保生成的语音既准确又自然。5.特殊处理0102语音合成技术的工作原理韵建律模韵律建模是为了让合成的语音更加自然，通过规划音高、音长和音强等音段特征，使语音更具韵律感。韵律建模的方法主要基于规则的方法和基于数据的学习方法两种。基于规则的方法是根据人工制定的韵律规则，自动生成相应的韵律曲线和音长序列；基于数据的学习方法是利用带有韵律标注的语音数据，训练韵律预测模型，根据输入文本预测相应的韵律特征。0102语音合成技术的工作原理语合音成语音合成是将处理好的文本对应的单字或短语语音基元从语音库中提取，利用特定的语音合成技术对语音基元进行调整和修改，最终合成符合要求的语音。常见的合成方法包括：基于共振峰的合成、基于波形拼接的合成以及基于分析-综合的合成等。评估语音合成效果时，通常会结合主观评价（如听觉测试）和客观评价（如语音质量指标），以确保合成语音的质量和准确性。【知识拓展】詹姆斯·弗拉霍斯：用科技留住爱詹姆斯·弗拉霍斯是一位科学家和工程师，他在语音合成和人工智能领域有深入研究。2016年，弗拉霍斯的父亲被诊断出患有肺癌，医生告诉他父亲只剩下几个月的生命。为了纪念父亲，弗拉霍斯决定利用语音合成技术创建一个虚拟爸爸。弗拉霍斯记录了父亲的大量语音数据，包括他的笑声、语调和常用语。他将这些数据输入到语音合成系统中，训练出一个能够模仿父亲声音的AI模型。2017年，弗拉霍斯的父亲去世了。几个月后，弗拉霍斯利用这个AI模型创建了一个聊天机器人Dadbot，用户可以通过手机与这个机器人交流，听到父亲的声音，甚至可以和它分享生活中的点滴。弗拉霍斯的“Dadbot”项目为那些失去亲人的人提供了一种情感慰藉的方式。他希望通过这种技术，让人们能够在亲人离世后，依然能够感受到他们的存在。弗拉霍斯的工作引发了人们对虚拟永生和人工智能伦理的深入思考。人们开始探讨，当技术能够复制人类的意识和情感时，我们该如何面对这些新的可能性。语音生成的实际应用场景Part04智声灵动：生成式人工智能的语音合成与交互革命智能语音助手能够提供信息查询、任务管理和设备控制等功能，代表产品有Siri、Alexa和GoogleAssistant，国内的手机应用如小爱同学也深受欢迎。智能语音助手Siri语音助手国产手机小布语音助手语音生成可以做为语言学习工具，辅助教育内容的传递。通过语音评分助手，可以为学习者提供发音指导和语言练习。例如，右图

即是一个通过生成语音进行发音练习和检查评分的学习环境，AI系统会提供外语朗读示范，并对学习者的朗读进行多维度分析和打分。教育与培训在当今的智能交通系统中，GPS导航系统已成为驾驶者不可或缺的助手。它不仅能够提供精准的路线规划，还能通过语音指导帮助驾驶员安全、高效地行驶。右图展示了汽车导航系统中的语音控制功能，这一功能极大地提升了驾驶的便利性和安全性。语音导航语音生成技术可以将书面文字转化为语音，帮助视障人士获取信息。许多手机和电脑系统都已支持视障人士通过语音助手进行操作，例如在Windows系统中，其“讲述人”功能允许用户无需鼠标即可完成常见任务，如阅读屏幕内容、编写邮件、浏览网页和处理文档，讲述人的设置界面如右图。无障碍技术语音合成技术还可以用于艺术创作，生成具有不同节奏、韵律和音色的音乐。例如网易天音在线可以根据提示词创作歌曲，如右图。艺术创作除上述场景外，语音合成技术还广泛应用于：资讯播报、订单播报、智能硬件、机器人对话、语音内容分析、实时语音转写等多种不同场景。网易天音：/#/在视频制作中，添加字幕和配音是提升内容表达效果和传播范围的重要手段，尤其在制作教学视频、广告、短视频等类型的内容时，其作用尤为显著。以下是一些实用的技巧和建议，帮助你更高效地完成字幕和配音的添加。首先，添加字幕时，要确保字幕既美观又清晰。字体的选择应根据视频的受众和用途来决定。例如，面向儿童的视频可选用圆润的字体，而教学视频则推荐使用宋体或黑体，以确保正式且易于阅读。字幕的大小也应适中，通常占视频高度的1/10左右为宜，避免过小或过大，以免影响观众的观看体验。此外，字幕颜色需与背景形成鲜明对比，深色背景可搭配白色、黄色等亮色字幕，浅色背景则搭配黑色、深蓝色等深色字幕，以确保字幕清晰可见。在完成字幕编写后，需仔细检查是否存在错别字或语句不通顺的问题，并调整字幕的时间轴，使其与画面和声音精准同步。【知识拓展】给视频添加字幕和配音在某些情况下，可以适当提前字幕的出现时间，引导观众的视线关注画面中的关键细节；或者让配音稍晚开始，先通过画面吸引观众，再通过声音点明主题。此外，如果视频面向不同地区或国家的观众，建议添加多种语言的字幕和配音，以扩大视频的传播范围。在完成字幕和配音的添加后，建议在手机、电脑、平板等不同设备上播放视频，检查字幕和配音的显示效果和播放流畅性，确保不同设备上的观看体验一致。在实际操作中，可以使用剪映等视频编辑软件来添加字幕和配音。打开剪映，导入视频文件后，点击“字幕”按钮，选择“添加字幕”，并输入所需内容。接着，调整字幕的字体、大小和颜色，确保字幕美观且易于阅读。点击“对齐”按钮，调整字幕的时间轴，使其与画面和声音精准同步。在添加配音时