人工基础智能 10

AI人工智能通识与实践CHAPTER04第4章AI文本智能处理AITextIntelligence授课教师：__________日期：__________课程：人工智能通识与实践AI文本智能处理本章目录CONTENTS本章目录1AI文本智能处理基础概念与范畴、核心技术体系2核心功能文本分类与聚类、文本摘要与生成3文本类AIGC应用案例内容创作、办公自动化、教育与科研人工智能通识与实践教程02/19PART01SECTION01第1节AI文本智能处理基础让机器"读懂文字、生成内容、辅助决策"，从手机输入法联想、垃圾邮件过滤，到评论情感分析、学术查重。概念与范畴应用领域表4-1NLP技术文本表示与深度学习03/194.1AI文本智能处理基础概述4.1.1什么是AI文本智能处理KEYCONCEPTAI文本智能处理：借助计算机技术对文本数据进行自动化分析、理解、生成和优化的过程，核心目标是让机器像人一样"读懂文字、生成内容、辅助决策"。手机输入法的智能联想邮箱的垃圾邮件过滤购物APP里的评论情感分析银行智能客服7×24小时问答学术论文的自动查重文本是人类传递信息、表达思想的核心载体，AI技术正使其实现"从人工处理到智能驱动"的跨越式变革。人工智能通识与实践教程04/194.1AI文本智能处理基础处理范畴4.1.2AI文本智能处理的范畴KEYCONCEPTAI文本智能处理覆盖范围非常广泛，从基础的文本分类、摘要提取，到复杂的情感分析、智能问答，几乎涵盖文本处理的全流程。文本分类：把新闻稿按"体育""财经""娱乐"分类文本摘要：从1000字报告提炼100字核心要点情感分析：判断评论是"好评""差评"还是"中立"智能问答：客服回答"如何查询订单物流"文本生成：依据产品参数自动生成商品详情页文案信息抽取：从合同中提取甲方名称、有效期、违约责任人工智能通识与实践教程05/194.1AI文本智能处理基础应用领域4.1.3表4-1文本智能处理的主要应用领域应用场景功能描述行业案例文本分类与聚类自动将文本按主题、情感或标签归类企业将客户投诉分为产品质量/物流/服务等类别情感分析识别文本情绪倾向（正/负/中）电商分析商品评论，生成好评率92%等数据报告机器翻译实现不同语言间自动转换AI实时将中文演讲翻译成英文字幕，准确率95%以上智能问答系统自然语言交互解答用户问题银行APP智能客服7×24小时回答常见问题文本生成根据需求自动创作文本新媒体用AI生成618促销活动文案信息抽取从非结构化文本提取关键信息法律AI从合同自动提取甲方、有效期、违约责任这些功能看似简单，却能有效解决信息爆炸时代的文本处理难题。人工智能通识与实践教程06/194.1AI文本智能处理基础技术体系4.1.4自然语言处理（NLP）三层次词法分析分词+词性标注如"我在学习AI文本处理"分词为"我/在/学习/AI/文本处理"；词性标注为"我（代词）/在（介词）/学习（动词）/AI（名词）/文本处理（名词短语）"。句法分析梳理语法结构分析"小红在教室里写作业"：明确"小红"是主语、"在教室里"是状语、"写"是谓语、"作业"是宾语，给句子画出"语法地图"。语义理解理解真实含义判断"苹果"在"买了一斤苹果"中指水果、在"苹果发布了新手机"中指公司；理解"他今天没去上班，因为堵车了"中的因果关系。NLP是文本智能处理的"骨架"，核心任务从基础词语解析到深层语义理解，层层递进。人工智能通识与实践教程07/194.1AI文本智能处理基础技术体系4.1.5文本表示：把文字翻译成数字向量1.词向量（WordEmbedding）把每个词语变成低维数字向量语义相近的词在向量空间中距离更近"国王"与"王后"的差≈"男人"与"女人"的差"猫"和"狗"的距离<"猫"和"汽车"的距离用于判断词语的语义关联2.句子向量（SentenceEmbedding）把整个句子转换成一个向量用于句子相似度计算考虑词语的顺序和语法关系应用于判断两句话是否同一意思常用于论文查重、相似度比对词向量+句子向量=让机器"读懂"文字的基础翻译官。人工智能通识与实践教程08/194.1AI文本智能处理基础技术体系4.1.6深度学习模型：让能力"提速升级"的引擎RNN/LSTM擅长顺序数据能记住前面的内容，理解上下文依赖。如分析"虽然开头无聊，但结尾反转精彩"能记住对比关系，在机器翻译、情感分析中表现出色。Transformer注意力机制2017年谷歌提出，靠"注意力机制"判断哪个词和哪个词关系更密切，如判断"小明告诉小红，她明天去北京"中"她"指"小红"，且能并行处理，效率高。预训练模型广泛学习+微调先在海量无标注文本上"广泛学习"形成通用能力，再用少量标注数据微调适配任务，如GPT-4、文心一言等大模型。BERT、GPT等主流模型全部基于Transformer架构，是当前大模型的核心基石。人工智能通识与实践教程09/19PART02SECTION02第2节核心功能分类与聚类解决"分拣"问题，摘要与生成解决"提炼"和"创造"问题。文本分类与聚类文本摘要与生成10/194.2核心功能分类与聚类4.2.1文本分类vs文本聚类文本分类（有监督）按已知规则给文本"贴标签"先人工标注"垃圾邮件"和"正常邮件"机器学样本特征后判断新邮件常见：垃圾邮件识别、新闻主题分类文本聚类（无监督）按相似性自动给文本分小组不用人工标注样本1万条客户反馈自动分"吐槽质量/建议/咨询"类别由机器自动发现分类与聚类相互配合，能将杂乱无序的文本数据实现结构化整理，提升信息处理效率。人工智能通识与实践教程11/194.2核心功能摘要与生成4.2.2文本摘要与文本生成抽取式摘要摘抄关键句直接从原文中筛选关键句子或短语进行拼接，不改变原文表述。如提取论文"研究背景、目的、方法、结论"，优点是信息准确，但衔接可能不自然。生成式摘要理解后重写通过模型理解原文语义后，用自然流畅语言重新组织信息。如将两小时会议录音转为"议题/共识/待办"的结构化纪要，更贴近人类总结习惯。文本生成无中生有根据用户输入的主题、需求或约束原创生成文本。如根据"产品：迷你加湿器；卖点：静音、大容量、USB供电"生成商品详情页文案。注意：生成式摘要可能遗漏关键数据（如"合格率95%同比提升5%"），生成后需人工核对。人工智能通识与实践教程12/19PART03SECTION03第3节文本类AIGC应用案例已渗透内容创作、办公自动化、教育与科研三大领域，是"用AI提效"的实用工具。内容创作办公自动化教育与科研13/194.3应用案例内容创作4.3.1案例1：文心一言生成文本KEYCONCEPT文心一言首页"创意写作"功能：在输入框中输入基本要求对应的提示词，点击发送即可生成符合基本要求的内容。1.写诗歌题目"赞美夏天万物生命力旺盛"，七律诗一首，生成"炎光赫赫映穹苍"等四联。2.写微型小说描述4名技术人员攻克技术难关，体现相互帮助的友情，不超过400字。3.写短文主题"幸福的意义"，采用"总—分—总"结构，用小故事示例，不超过400字。4.编故事编写关于狗"奇奇"拯救小镇的儿童故事，包含冒险和友谊元素。图4-1文心一言创意写作窗口人工智能通识与实践教程14/194.3应用案例内容创作4.3.1案例1续：故事生成（豆包）PROMPT编写一个关于一只名叫奇奇的狗拯救小镇的儿童故事，包含冒险和友谊的元素。图4-2豆包输入框输入提示词后的结果AI根据提示词生成完整故事，可进一步要求"加入更具体的角色对话"或"突出环保主题"等迭代修改。人工智能通识与实践教程15/194.3应用案例办公自动化4.3.2案例2：WPSAI"帮我写"PROMPT会议通知，主题：人工智能讲座，时间：2025年9月10日，地点：学术报告厅。图4-3WPSAI帮我写会议通知AI自动生成包含标题、正文、落款的标准通知文档，格式规范无错漏。人工智能通识与实践教程16/194.3应用案例教育与科研4.3.3案例3&4：WPS灵犀+课题确定流程案例3：WPS灵犀生成Python入门教案教师输入教学目标、章节、课时等关键信息AI自动生成结构化教案内容包含知识点、案例、练习、参考代码可作为教学设计的起点和参考案例4：直播电商课题确定（Deepseek）第一步：挖掘选题灵感（推荐课题方案）第二步：分析课题可行性（5维雷达图）第三步：生成研究计划框架（流程图）AI仅提供初稿，需结合实际情况调整图4-4WPS灵犀图4-6deepseek首页输入内容人工智能通识与实践教程17/19AI文本智能处理本章总结SUMMARY本章总结基础AI文本智能处理是让机器"读懂文字、生成内容、辅助决策"，核心在于NLP、文本表示与深度学习三大技术。核心功能分类与聚类解决"分拣"问题，摘要与生成解决"提炼"和"创造"问题。应用已渗透内容创作、办公自动化、教育科研等领域，关键在于把握"工具辅助"与"自主思考"的边界。避免过度依赖AI生成内容，在学术与创作中应作为辅助工具使用