版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
业务部门通过自研AI系统增效2.AI3.实战案例分享4.现存问题与未来规划5.总结与展望背景介绍背景介绍效率瓶颈问题传统客户服务流程手动操作步骤过多效率低下效率瓶颈问题传统客户服务流程手动操作步骤过多效率低下部门内部数据共享不畅,影响决策效率和服务质量业务部门懂业务,研发部门懂技术业务流程优化和自动化促进数据驱动决策数字化转型历程-初期尝试与探索业务流程优化和自动化促进数据驱动决策数据可视化仪表板AI大语言模型赋能训练训练LLM---端到端模型•单一任务场景文本•具备推理泛化能力文本基础大模型放弃训练放弃训练LLM---非端到端模型•保留LLM对于公共知识的感知能力•灌输领域知识的认知能力懂得业务的懂得业务的AI优先需要懂得业务的人代码实现次之实战案例分享案例一:利用LLM助力案例处理服务电话中心面临的挑战用户对解决问题速度的要求快速定位解决方案的需求电话量逐年上升目前的知识库(关键词搜索)目前的知识库(关键词搜索)•需要业务背景理想的知识库(向量搜索理想的知识库(向量搜索)•上下文语义理解•支持多轮问答•数据本地化第一阶段:向量相似度匹配的AI知识库优势•优势•少量数据集•语义相似度搜索•问答对的单一形式•源数据内容交叉信息少•对用户提问要求高图片来源:Retrieval-AugmentedGenerationforLargeLanguageModels:ASurvey从多文档中挑选从多文档中挑选出针对用户提问的单一文档或相关段落重新梳理AI知识库系统的任务需求本质数据源的优化-企业文档的数据标准化应用分层检索文档分层级拆分改善检索对称性文档生成问答对增加数据源多样性问答对变形推理型问题数据标准化带来的痛点-割裂的数据原始数据源的数据标准化虽然增加了检索准确性,但丢弃了很多上下文内容;内容虽然独立且易于检索,但缺失了原文所体现的因果联系。因此仍然需要保留企业文档。以查询路由的方式来判断问题特征,以此确认预设的双阈值。双阈值的设计允许在短语或文档级别之间切换检索目标。•对于推理型问题,只有全文内容才可以完全体现“因果”性。•而若想在短语层面体现“因果”性。需要通过打分、评价等数据形式来进行强化学习。以现阶段来看这种额外的因果联系的建立并不可信,因为它增加了处理过程的复杂性,导致最终的结果未必准确。解决方案-双阈值设计双阈值设计:双阈值是由用户可自定义的两个数值,代表高阈值和基础阈值,目的是为了确定检索目标是短语多个输出的排序唯一答案的确认多个输出的整合支持多种文档格式降低用户提问要求相似度匹配结果提升特定性内容输出结果不理想交叉型内容检索仍有混淆•语义信息损失•可解释性差•依赖上下文•精确的语义关系•结构化查询•丰富的领域知识•可解释性•计算效率高•灵活性强Cons:•自动特征提取•更新和维护成本大•处理自然语言•覆盖范围限制•复杂度高现状:针对一篇文章的内容做问答期望:针对多篇文章筛选目标文章在不确定中寻找确定用户的真实提问->决定节点,关系,属性•如何启用传真和扫描功能•打印机驱动怎么安装?问题错误->解决方案•为什么会出现驱动安装失败的情况?问题错误->问题原因•error100代表了什么问题?日志代码->问题错误•error100怎么解决?日志代码->解决方案知识库效果测试&收益(第一至三阶段)传统关键字检索第一阶段:向量匹配第二阶段:高级需要进行大量的人工审核工作来保证数据标准化结果的准确完整业务系统环境的变化需要运维工具的改变通过自然语言的交互,能够融合复杂的运维环境,自行规划决策,便捷的获取跨领域信息,给出各种运维任务的建议或结论环境复杂多样支撑和交互支撑和交互人员精力消耗人员精力消耗适应和迭代适应和迭代环境上下文AIAgent加持的运维工具AIAgent加持后运维工具将不同领域技能的有机结合,让繁杂的垂直知识领域知识互享、传达以及利用更具效率。结合环境信息规划整理03感知与定义规划整理03感知与定义02自然语言交互0107记忆沉淀模式模式AI完成部分任务和流程初稿人类修改调整确认模式人类人类自主结束工作基于人类问答,提供信息和建议基于人类目标,完成单任务/简单任务单任务场景单任务场景:备份信息获取对于对于家将,误。,,或过剩,。橙色表示效率瓶颈lIi,前前后人因错误减少45%跨领域精力消耗减少平均效率提升培训的业务场景培训场景培训管理员培训管理员培训素材和资料培训素材和资料培训提纲和课程培训提纲和课程考核和互动考核和互动{{{{人员技能要求人员技能要求人员业务要求人员业务要求资料的数量庞大资料的格式不同课程固化调整不便需要很多人力成本题库编写人力成本大出题形式固定用AI来解决业务痛点培训管理员、培训培训管理员、培训助理培训素材和资料培训素材和资料培训提纲和课程培训提纲和课程考核和互动考核和互动利用LLM+Vector利用LLM+VectorDB+LocalDB+Chatbot实现考核和问答考试阶段培训阶段考试阶段培训阶段准备阶段准备阶段考核评分5学员自主培训考核评分5学员自主培训4培训素材处理编写培训资料编写题库和答案原培训素材处理编写培训资料编写题库和答案原来112•登录考试平台2•登录考试平台•完成答题•判卷评分•获得证书主观题问答评估题目解析•自行阅读材料3•内容和格式•提炼知识点•评估时长•提炼主要内容•形成培训文本•上传更新平台•审核和发布•编写海量题库•校对答案•上传考试平台•建立考试项目•发布考试利用LLM的文档分析、利用LLM的文档分析、内部知识库的能力解决培训素材、培训资料和题库的准备••学时评估•• 3• 3现在 学员自主培训现在 学员自主培训 AI培训素材处理1AI培训系统架构图AI极大的减轻了管理员对培训内容的准备工作,提高了生产LLM生成客观题库人工审核题库和答案试题随机抽取保存在本地数据库随机抽取试题答案比对打分用户考试场景中的AI应用-主观题考核提供改进后的答案对用户提供答案进行评估和解析收益可以归结为5个词:人力、效率、技能、互动、灵活以往的在线培训以往的在线培训,学员只能自行观看培训内容,AI培训可以增加AI助理随时提问随时解答可以根据需要随时生产和调整培训内容任何一个人员都可以使用AI培训系统任何一个人员都可以使用AI培训系统,生成自己想要的培训内容和课程不需要专业的培训策划;一键生成培训提纲和培训内容,可以随时更换素材生成新的培训和题库原本一个培训策划和实现的过程,现在只需要对素材进行要求,即可一键生成培训现存问题与未来规划使用大语言模型的生成结果时需要大量的人工审核尽管可以通过人工标注来训练机器学习模型进行分类任务并以此优化模型,但这个过程存在两个主要限制:未来计划-解决方案:数据标准化的自动化使用可量化的评分标准将人工审核工作自动化针对不同类型数据源的评分标准结构化数据一致性一致性连贯性相关性流畅度语义性非结构数据文本序列相似性文本内容重叠忠实度答案相关性上下文精度上下文召回率未来计划-解决方案:数据标准化的自动化为保证大语言模型的生成内容的准确性需要人工审核结构化数据靓滓僚囹滓*+非结构化数据褓%&靓滓靓*+乘茼重未来计划-解决方案:数据标准化的自动化评分标准的量化执行策略代替人工对大语言模型的生成结果进行自动审核结构化数据靓滓僚囹滓)*非结构化数据褓%&靓)*滓靓)*未来计划-数据标准化的自动化:量化评分十分接近,系统无法判断什么样的得分可以通过自动审核模糊逻辑,设置高中
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026年江苏连云港公用设备工程师考试(给水排水专业考试)题库及答案
- 全国计算机等级考试二级基础强化模拟试卷带答案
- 2026年青海省继续教育公需科目练习题库(含答案)
- 2026年公卫医生模拟题库(含答案)
- 2026年会计高级职称考试模拟题试卷及参考答案
- 2026年采煤专业复习题库(含答案)
- 2026年煤矿采煤机(掘进机)操作作业安全生产模拟考试题库及参考答案
- 2026年辽宁建筑安全员考试题库带答案
- 新生儿护理知识专项训练题库及答案
- 自然科学基础常识高频考点题库及答案
- 二十届五中全会客观测试题及答案解析
- 无人机地形测绘作业方案
- GB/T 48188.2-2026光伏系统用额定电压1.5 kV直流电缆第2部分:铝合金导体电缆
- 2027中国华能校园招聘考试模拟试题及答案解析
- 2026中国睡眠医学中心建设现状及市场需求调研报告
- JJF(苏) 317-2026 差压式流量计(气体)在线校准规范
- 2026秋小学湘美版美术五年级上册(新教材)教学计划含教学进度表
- 新版小学道德与法治新部编版六年级上册全册教案(2026秋版)合集
- 2027届初三中考全年备考统筹实施方案
- 重卡充电站项目可行性研究报告
- 2026年入党积极分子预备党员考试题库(含答案)
评论
0/150
提交评论