计算机行业市场前景及投资研究报告:AI+研发基于需求知识工程建设的增强大语言模型赋能需求提效_第1页
计算机行业市场前景及投资研究报告:AI+研发基于需求知识工程建设的增强大语言模型赋能需求提效_第2页
计算机行业市场前景及投资研究报告:AI+研发基于需求知识工程建设的增强大语言模型赋能需求提效_第3页
计算机行业市场前景及投资研究报告:AI+研发基于需求知识工程建设的增强大语言模型赋能需求提效_第4页
计算机行业市场前景及投资研究报告:AI+研发基于需求知识工程建设的增强大语言模型赋能需求提效_第5页
已阅读5页,还剩29页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1.

背景&痛点2.

解决思路&整体方案3.

具体实现目

录CONTENTS4.

总结与展望PA

RT

01背景&痛点背景需求分析设计开发DevSecOps测试运维频度程度本活动是否频繁发生本活动所耗时长基于能耗模型,进行量化评估能耗评估总能耗=频度*(人数+程度)人数本活动涉及到的人数规模5分每天>30%4分3分每半周~每周>10%2分每周~每双周>5%1分>双周<5%频度每天~每半周参与⼈数(占⽐)>20%程度(活动耗时)>120Min>60Min>30Min>10Min<10Min背景TOP能耗活动:需求准入检查、需求实例化分析,需求评审工作量较大总能耗=⾼活动任务步骤需求获取涉及⻆⾊频度5⼈数3程度3频*(⼈数+程度)痛点问题SE/型号负责人303630原始需求澄清SE/BA/P需求描述/背景/目的完整度低,沟通和检查成本高,反复沟通带来浪费※需求准入检查特性分析445OSE/BA433需求吞吐量增长17%,BA人员基本不变,分析产能与逐年增长的需求存在GAP,存量知识继承运用不足,依赖BA的经验和能力需求分析BA/DEV※需求实例化分析45540/TSE市场需求分析BA/安全经理安全分析4232024影响分析BA/PO433需求评BA/DEV评审依赖经验,评审标准难统一,需求分析场景遗漏故障占比7.1%(目标5%)※需求评审45332审/TSE痛点因家端产品定制需求多,需求实例化分析工作量大,需求无法直接复用,重复进行实例化造成研发人力浪费零散增加了分析难度,同时相似需求占比高,实例化内容需求分析⼯作量⼤需求现状需求分析难度⼤重复分析造成浪费PA

RT

02解决思路&整体方案解决思路:构建基于知识工程的AI应用,覆盖需求高能耗活动,设计原子应用编排,模拟BA工作嵌入研发流程,实现大模型需求分析提效需求活动需求预分析需求实例化需求评审痛点问题需求描述和验收准则规范性问题靠人工检查,比较耗时和存在遗漏分析产能与逐年增长的需求存在GAP存量知识继承运用不足,依赖BA的经验和能力需求分析缺陷偏高,需求评审依赖经验,易遗漏子场景需求准入检查定系统找用户问目的画场景列功能需求评审AI需求准入检查AI需求实例化生成AI需求评审需求AI应用PEPE+知识工程历史相似需求的需求实例化内容(定系统、找用户、问目的、画场景、列功能)和特性的应用场景做检索增强生成PE+知识工程基于准入规范,自动检查需求描述和验收准则构建历史故障知识库,自动评审需求分析缺陷需求输入AI需求准入检查确认AI需求实例化生成实例化知识库确认AI需求实例化评审故障复盘知识库确认分析输出故障复盘知识飞轮准入规范知识飞轮知识飞轮l通过BA确认准入检查的可采纳情况,调整准入规范,更新PEl通过铁三角判断内容生成的质量,调整实例化内容,语料清洗,补充实例化知识库l需求故障复盘,通过BA输出原因分析和复盘举措,更新到故障复盘知识库整体方案:基于需求域端到端的知识工程建设,实现AI辅助需求分析提效提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量需求获取需求分析沉淀到需求体系化Answerþ

语料清洗Query需求实例化内容有效生成þ

应用触点þ

知识库建设þ

度量þ

评估端到端知识工程建设存量需求体文本提取向量化语料库系iCente页面自动回填语料评估召回评估覆盖率采纳率需求描述生成向量语义相关性比较相似需求向量库þ

RGA增强检索文本拼接模型评估应用评估大模型星云研发大模型星云电信大模型þ

提示词通用提示词模板区域化提示词模板整体方案:需求知识工程的底座-需求体系化需求树•XXX市场需求需求描述实例化分析设计方案(业务架构)特性索引用例设计(TCO,要素差分)需求方案(业务架构)场景树特性树组件树基于要素库做差分波及•

XXX场景•

XXX特性•

XXX组件原始需求特性描述特性配置组件说明需求分析方案设计(应用架构)组件接口(CT)功能点描述特性设计(应用架构)代码库子场景1..N要素+因子表达需求索引实现原理和业务流程1)实现原理业务架构2)业务流程3)特性拆分功能点1..N特性索引功能测试点特性设计(应用架构+IT)组件索引用例设计(UST)子组件关联(应用架构)用例设计(FT)用例设计(TCO,ST)用例库整体方案:需求知识工程的底座-需求体系化到需求知识图谱PA

RT

03具体实现重点实践:AI需求实例化内容生成-背景导入五步法为什么采用五步法?统一、简洁、好推广。重点实践:AI需求实例化内容生成研发活动流程市场需求输入定系统、问目的、找用户画场景列功能人工修正铁三角评审ü

理解需求实例化方法(五步法)ü

理解需求描述和背景ü

了解系统现状和产品用户ü

熟悉需求树内容及需求相似性ü

熟悉特性树内容ü

熟悉需求和特性的关系ü

熟悉组件树内容ü

熟悉需求和组件功能点的关系关键能力①我们需求大模型做什么③大模型需要我们做什么②大模型能为我们做什么ü

自然语言处理和理解:意图识别、内容生成ü

领域通识:电信领域基础知识ü

语言风格一致性:文本表达的语法准确一致模型能力产品信息掌握能力产品需求理解能力需求体系化内容掌握能力实例化规则理解能力④我们能为大模型做什么知识库提示词大模型需求体系化内容需求QA对预训练精调关键技术第一阶段•

产品信息•

需求的描述&背景•

实例化内容生成规则第二阶段特性QA对需求域知识图谱实例化正反例评测集需求知识图谱第三阶段基于DN

Studio平台的提示词管理,同一应用可配置多个项目的提示词提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量为支撑不同项目的诉求,当前提示词可支持项目限定信息、AI输出内容、AI输出格式的配置提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量配置说明项⽬限定信息不同项⽬的问⽬的、找⽤户等范围不同,如:家端产品需要通过增加限定词来提⾼AI⽣成可靠性Before:⽣成不具体After:与业务强相关AI输出内容AI输出格式不同项⽬要求输出的内容不同,如①OTN项⽬需要输出兼容性场景②PONG项⽬要求输出RAG相似需求推荐列表不同场景下AI⽣成的内容格式不同,如①⾃动化⽣成和评估时,需要⽣成JSON格式,便于⽣成结果解析②⼈⼯触发AI应⽤时,需要⽣成MarkDown格式,便于查看开发自定义清洗算子,把需求节点上的历史需求处理成格式化的需求语料,适配多种任务场景提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量开发通用和定制清洗算子适配于需求节点所有页面提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量历史需求节点转为需求QA对支撑知识库建设提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量知识库按项目独立存储,包含索引和元数据文件,支持RAG、跨知识库检索,相关信息检索提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量ü

RAG:检索内容拼接提示词给LLMü

跨库检索:PONG项目查找DSL知识库ü

相关信息检索:呈现查找需求的标题、空间链接等相关信息通过自动化脚本每日识别新增需求,将人工评审通过的需求更新到知识库,实现知识库保活提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量基于DN

Studio编排搭建AI应用底座,实现知识库检索、LLM多路并行生成、内容格式化等提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量基于脚本自动回填和@自动回复两种方式完成工程化推广,自动执行后标记AI生成提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量两种触发方式的都是自动化执行,无须人工干预提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量每日自动触发AI应用完成新增需求实例化,回填结果到iCenter需求页面提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量建设评估集,评估应用效果提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量字段require_scene⼈⼯评审通过的实例化内容ai_ressimilarity_tf基于TF分词的相似度计算adoption

rateis_rag是否⽤知识库说明AI⽣成的实例化内容采纳率评估结果牵引效果提升改进提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量通过数据埋点保留关键过程信息,如生成内容、时间戳,呈现一体化度量看板提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量基于TF-IDF

算法的采纳率计算提示词语料清洗知识库搭建RAG应用编排自动化应用触点自动化评估集无侵入式度量定义TF-IDF(Term

Frequency-InverseDocumentFrequency)是⼀种在信息检索和⾃然语⾔处理中⼴泛使⽤的统计⽅法,⽤于评估⼀个词语对于⼀个⽂档集或⼀个语料库中的其中⼀份⽂件的重要程度。基本计算词频(TF)表示词条(关键字)在⽂本中出现的频率,通常被归⼀化处理以防⽌词!在⽂档"中出现的次数偏向⻓⽂档。公式为:TF(t,d)

=。逆⽂档频率(IDF)⽂档"中的词条总数表示词条的普遍重要性,反映了词条的稀有程度。IDF的计算公式是:ꢀꢁꢂ(ꢃ)

=#ꢄꢅꢆ()。其中,D

是⽂档总数,ꢇ

ꢈ!是包含词条t的⽂档数量。通过取对数,可"

$!

%

&以避免数值过⼤的问题,同时保证了IDF的单调递减特性。TF-IDF的计算公式为:ꢉꢂ

ꢀꢁꢂ(ꢃ,

ꢇ)

=

ꢉꢂ(ꢃ,

ꢇ)

×ꢀꢁꢂ(ꢃ)。算法特点TF-IDF算法的特点主要是:简单快速,容易理解,不考虑词语的语义信息,不考虑特征词的位置因素对⽂本的区分度,以及忽略了特征项在⼀个类别中不同类别间的分布情况。正是基于这样的算法特点,它相⽐于Embedding算法会更加地“严谨”,因此更会适合于计算采纳率。效果评估Ø清洗4.9w需求节点,构建包含1.3w需求QA向量知识库,采纳率提升10%(20%->30%)语料清洗知识库建设评估建设Q:需求标题和描述Q:特性标题和描述A:需求树内容-画场景、设功能等A:特性树内容-应用场景和关联用例等先验评估ü

评估集建设历史需求存量特性存量用例需求树特性树•特性描述•应用场景场景说明Given

When

Then嵌入流程评估•定系统•找用户•问目的ü

通过评估机制自动化和人工校验,新增需求分析内容和特性更新需符合结构化要求•画场景场景•业务流程Given

When

Then•子特性定义•关联需求•关联用例•关联组件•设功能•关联特性效果评估Ø7.8w测试用例通过大模型自动提炼转换为需求QA对,需求场景知识库QA对整体增加46%,采纳率提升10%(30%->40%)效果评估Ø基于模拟特三角评审实例化的方式,明确画场景和MFQ互为评审补充的autowork方案,相较于单点应用,AutoWork对于GWT的生成采纳率提升5%(40%->45%)Generator-实例化原始GWT生成原始QueryGenerator-测试点原始MFQ

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论