版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
MTSC
2025中国互联网测试开发大会TESTINGSUMMIT
CONFERENCE
CHINA2025质
效革新
·智领未来2025/7/121
上海喜来登由由大酒店主办方:
TesterHeme上海站Al驱动的测试新范式从智能用例生成到视觉自验证的闭环实践质效革新
·
智领未来
主办方:TesterHeme中国互联网测试开发大会TESTINGSUMMITCONFERENCE
CHINA
2025站MTSC
2025李林波分享人简介李林波腾讯音乐(酷狗业务线)-高级测试开发工程师√
先后就职于网易、腾讯、腾讯音乐√
主导构建酷狗音乐AI驱动的质效体系√
主导酷狗音乐效能平台和自动化能力建设MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme上
海
站Al生成用例Al生成用例方案、Al
生成用例技术基于视觉大模型的AI用例执行未来规划Part
1Part
2Part
3目录ContentMTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme上
海
站Al生成用例MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme上
海
站传统用例开发困境·
费时费力:用例编写耗时占比30%·质量暗礁:异常、性能、合规等场景遗漏·
人才瓶颈:依赖专家经验AI工具认知偏差·
错误认知链条:一句话指令
→生成低质用例
→
调试耗时
→放弃·
常见陷阱:忽略
Prompt工程,缺少业务知识,无格式规范·Prompt组装工程化·
自动知识注入与手动注入协同·
用例生成格式标准化·
智能、高效生成用例·
多类型用例扩展与用例补充·业务知识/测试方法沉淀
建设通用AI
用例生成平台MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质量保障,共性问题质效革新
·
智领未
来主办方:TesterHeme上海站粒度过粗/过细步骤逻辑混乱用例风格不一用例格式散乱领域知识缺失业务特定功能公司专业术语行业规范场景覆盖不全边缘场景遗漏异常场景未覆盖性能场景缺失突破方案:Prompt工程+领域知识注入MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025Al
生成用例三大瓶颈质效革新
·
智领未来主办方:TesterHeme上海站Prompt
工程优化
知识库赋能
生成格式标准化·
框架限定:功能点+验证点+步骤+预期结果·粒度控制:明确对象,量化要求测试步骤和预期结果]不超过[50个字,不超过[3个][检查项
功能描述原子化·
角色锚定:「你是酷狗音乐测试架构师」·
功能解构:「动词+对象+约束」公式拆解需求则试用例
AIGC
实践
K
歌需求
P0
用例AI生
成质效革新
·智领未来
模块Bug
、修复方案 API文档、代码MR
历史用例、专业术语用
户
查询内容
向量化嵌入式模型生成响应验证[VIP歌曲播放]在[非付费用户]场景下的[30秒试听截断功能Prompt
工程与知识库双引擎MTSC2025中国互联网测试开发大会TESTINGSUMMITCONFERENCECHINA2025增强提示词检索风险技术业务主办方:TesterHeme相关文档查询内容上海站向量数据库大语言模型Al生成用例-方案智能生成、智能丰富、智能补充MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme上
海
站阶段四prompt
管理prompt自定义,业务测试可根据
业务特点和用例
特性维护合适prompt阶段三扩充用例类型智能生成兼容、性能、弱网、埋
点、异常等不同
类型用例,并自
动补充用例阶段五图片解析补充图片解析能力,智能分析出
需求里图片的逻辑阶段二微调模型完善业务知识库,并与AI团队搭建
垂类的生成用例
模型阶段一项目启动需求内容自动输入到大模型底座
自动生成用例阶段六持续优化badcase分析接入deepseek
解除业务依赖数据分析改进:结合使用率、采纳率、覆盖率、主观提效数据,下钻分析,逐一优化提升MTSC2025中国互联网测试开发大会Al生成用例演进过程质效革新
·
智领未来主办方:TesterHeme上海站鲁广售·
挑会员鸭权eVP鲁拾国VP隐会招触
鲁合热的热
临会肌质地鲁
o
性
器酥中心BIoT身评命sB首
8鲁棵量四a金昌价楼i“
。m
:hr.n.m.as.6.
i,nI,:常规的测试类型通带用W
场手一,边贸值方
法涉及修改名房反字瘤潮量时1.世置过时,哪保有成功,界配喷以市真业/2数置力空运力时,不轮保存城功,面钻出8理进试者事平认值数据不宫法/慧读时,不能保存感功,齐面理
拌
示.数据在禽求求慧国之内,以弃成功,男星可服示配业/隔起数据在霸求莫京里之外,不保有成片,养面结出治埋擅示第9加果投力
一
个接量年轴人的造用序验计边晋值试用酬,控熙人下步膜:量入城:年赫(数道型)。边界值:囍小年龄《9200岁)。融大年《例120岁),比最于年龄小1的填(例0-1岁)。比融大年龄太道的值(例0121岁)。基于上述边界值,批河以赖计以下断试用例:脑入填
fI
结果受验入接受箱入拒隐镜入或理错菜拒缩入或理示槽误二
、等的类判试方法1相范禽求产指确走所有可能前随人值址二能人制为尊垃等信肉和无驶等位高,有等食指在进共中,里少有
一个测试用%键执行,
2从每个直效等价肉中选一个或代表性的
试阳例,操保酸量所育真峡等侦离。申例:如果们力一计算幼用程序的加法功能设计测试用南,可以按施以下中瘦:描入城:两个整妙的加法。有险等价类rAI底座预置大模型
星云精调模型混元
Chat-gpt业务知识推断出用例测试类型●需求文档●测试经验●经典用例◆用例设计方法●业务名词解释归纳需求点业务知识promptAI模型底座生成用例质效革新
·智领未来
主办方:TesterHeme模据伯信不同用户进供不同金员开通伯格1.垂员类型:华v口怡格,指堡v怡楼,意乐短价帽,廉华音乐国的格,升级应里v国
格2.价帘时:常理价格,健销优恶价格,算法综格,冲童价临2.
的方式:连续包月,连情国学,连续临年。单月卡,单季卡,单年卡4.加方式:加所书,加购动T,加盒曲员(严迅,优配等)日常业务知识积累MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025系统框架和业务流生成用例智指生成用例知识库需求描述业务流数据源需求
、Wiki
用例、图片测试
用例设计方法数据获取
加载
清洗
切分上海站A助手Pronetprompt
编排一用例设计方法智能补充用例智能丰富用例业务知识库式
刚T1序号13loadmY节WT4Deepseek网120向量化1121KIMI德...需求描述业务背景
测试类型测试方法API
ServiceAI底座预置大模型星云精调模型KIMI
Deepseek
通义
混元结合需求、业务知识库等数据,设计合理prompt,搭建精调模型3步智能生成用例用例系统用例助手(会话窗口)展示用例文本3.采纳用例转换基础能力用例集管理……
1
.用户输入…2.输出用例…脑图用例MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA2025●需求文档●测试经验●经典用例●用例设计方法(人工配置)●业务名词解释(人工配置)指标评估覆盖率(召)满意度打分表格用例用例管理业务知识库向量化智能生成用例质效革新
·
智领未
来主办方:TesterHemeprompt
组装
(AI
用例逻辑)数据源需求、Wiki
用例、图片数据获取加载清洗切分上海站采纳率(准)产品管理load质效革新
·
智领未
来
主办方:TesterHeme供先
级
梗
块王主
期主腔主期上R主题±主题理王上E功能点
翰
证
点表
格
用
例参
行
模
式
盘
数竹彼式世
南的数览=4且ot多行模式矛
电
命
数
-蜜沉盟单
出数整4更
多盘示多
行
填
下门硫
式
节
电白数警4单行彼式想示
艳治数据-单行彼式量白胜
量
4
且
4单行碳式示
电
影
费
-
1地行彼式思
台数鱼步
骤:
临四招交1.打开事行模式2.第人境台龄距生
人
用预期结果上
三
三”。
图片输入KM
7
IR生M10
整已热盔自码据三致面课社国地,A击(新叶主地相广音奇部Dnoa应脉中心OT新部N胸试类型:者称
梦
警概
步
高实两
聊吸
为1,
m
+算
价煲播阳结案勇客为325%政出力西为925*76-1%攻态力伤言为325+19量大尊级-1攻当力换规你害计算边
严值预聪朝客计算边
界直2主角等吸力6,试技轮者计具主得吸
为
最
大
顶,肉者
计露技较
封师
奉
每
主
共喷出,账
之国合高次
攻
伯供
曲独
酸
股
发
率
角
运
噪
攻
击
4
9
,
面
第
5
端
合
面
次
攻
界值+
图第5匠幽斯次效市地辣酸饺果第5国曲盖次改出不数起故坪技
脱
牧
率
边
养值2抽蛇活8=主
共品成次共
器
车
效盟次出描
过
题
n,
声
合不
为
,
H
H
的
骑
市幽次攻击唯发望彩效里社时出反暴出效用脑图用例6s8
址#e*-智能生成用例效果--3步生成用例①归纳需求内容②筛选用例②生成用例MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025德:
的新世新位子抽2:垣tr妆上对造(35
·tt您好,我是停的用科小勋手,您可以度用例内春切换A助手,遇择用影模银生成馨使度用倒,关联业
勇知只库证A里好的理解需求。需和内得:1皮击力的
计湖S的红言斯保句产效:主角炬过
国时发显
量9时防市效果5文政出均疆质(51tsw
3天效里」消对该新技谨设协批想想文字输入未址耳使用试型业务卫,考以上业男柿面,地出以上功声服述及购试电1力客(可显出出夏
热效果L
穿新效果)W
读新
让如用9世
块中甲中中中m
杜娱业身
C种充用自上下文篮
C补此用深上下史t0ts
un
口上海站捧用革me.7UJ需mi
ts所-1Al模型底座AI
模型底座生成用例
生成用例,输入不同的业务知识和prompt,AI
模型会返回不同的结果○通过调整业务知识和prompt,
使模型分析出更丰富的用例
质效革新·
智领未
来类型用成用(多生AI模型底座生成用例(补充用例)主办方:TesterHeme智能生成用例智能丰富用例智能补充用例归纳需求点归纳需求点归纳需求点业务知识
已有用例prompt(补充)思路:梳理生成用例过程,确定生成过程变化的“变”与“不变”,扩展“变”的部分可变数据业务知识prompt(功能)扩展新思路prompt(功能)继续拓展prompt(-……MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025智能丰富和智能补充用例业务知识Vprompt(性能)上海站测试类型Prompt通用异常-附加参考业务背景,需求描述以及’异常维度的prompt要求,给出异常维度的测试用例,用例的粒度尽可能细致。以下是业务背景…{{background_desc}}…以下是需求描述.
{desc}}…以下是异常'维度的prompt要求增加以异常为维度的相关测试用例,其中异常又分为:容错、中断’,并将它们作为`异常的测试项。容错进一步细分为:模拟socket消息异常,客户端不崩溃,功能不报错`、模拟接口返回异常,比如状态码错误、返回参数类型不对、返回结构体不对、缺失部分字段、返回超过数据字典值等,客户端不崩溃,功能不报错、各种数据类型不出错,比如各种歌曲格式、消息类型、多页面并发操作,或者模拟弱网,部分页面请求返回顺序不一致或者无
响应的情况下,页面是否报错、首次/非首次、首尾逻辑:登录/未登录状态,第一次/非第一次进入问题、首次/非首次下载,失败后重启APP的初始化逻辑、首句末句打分逻辑,并将它们作为`容错的测试名称。中断进一步细分
为:“中途接打电话,回来后功能正常,响应速度正常”、切后台进程未被回收,回来后功能正常,响应速度正常、锁屏,回来后功能正常,响应速度正常”,并将它们作为中断的测试名称”。5质效革新
·智领未来主办方:TesterHeme通用性能参
考
业
务
背
景,需
求
描
述以
及^
性
能
“
维
度的
p
r
o
m
p
t
要
求,
给出
性
能”
维
度的
测
试
用
例,
用
例的
粒
度
尽
可
能
细
致
。以
下
是
业
务
背
景{background_desc}}以
下
是
需
求
描
述{desc}}以
下
是
‘
性
能
^
维
度
的
p
r
om
p
t
要
求增
加以
性能’
为
维
度的
相
关
测
试
用
例,其中
性能
又
分
为:常
规
性能”
、内
存
泄
漏、时
延”
,并
将它
们
作
为^
性
能”
的
“
测
试
项
。常规性能进一步细分为:1
.
业
务
场
景
考
虑
C
P
U、内
存、温
度、电
量、
P
F
S
等
指
标
在
合
理
涨幅
范
围内
;内存泄漏
进一
步
细分
为
:1.多次
进
入功
能
再
退出
功
能、
前
后台
切
换
等
多
次
操
作,
看内
存
是
否回
收2
.
进
入
功能,再
退出
功能,不能
增
长,如
果
有
增
长需
开
发
说明
原因,如
有
特
殊
情
况(
例
如
为了
快
会
缓
存
某
些内
容
不
释
放
)
集
成
开
发
评
估
通
过,同时
整
体
不能
超
过阈
值,
涨
幅
不
能
超
过阈
值
3.多次
进
入退出
后
都
不
停的
有
增
长,需要
修改时延进一步细分为:1.
H5
页
面1
.
5
秒内
打
开,复
杂
页
面
2
秒内2.原生页面打开速度:秒开通
用
业
务
功
能通用
兼
容通用合规通
用异常通
用性能通用弱
网通
用
安
全
风
控通
用
埋点通
用
体
验通
用
补
充
用
例通
用
补
充
用
例
-
脑
图通
用
异
常
-
附
加功
能
异
常
场
景
判
断智能丰富和智能补充用例-prompt
例子MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025针对不同用例类型制定合适的prompt目
当
目
当
当
当
目
当
自
当
自
当
当测试类型Prompt上海站【20改版性能】资产类预加载接入预测框架接入预测模型,预测模型原始需求我喜欢,最近播放,本地歌曲,全部歌曲接入了预测模型,会发预加载,根据已有用例和以上需求描述,补充生成相关用例2024-11-0815:02:40
共生成用例24条,已选择0条测试类型:用例补充自研(星云)模块功能点验证点
步骤预期结果1.准备1万2千首歌的测试数据本地歌曲扫描分批其他扫描速度提升2.执行本地歌曲扫描入库操作扫描并入库的时间少于89秒入库3.记录扫描并入库的总时间1
注土妈位门in
z
只方自研(星云)V
业
务
功
能
⑧
+
4
广告
+2
功能描述样例业务功能×
性能×
兼容×
合规×
体验×
广告×
会员×
DIY
播放器×请输入功能描述及测试点,点击「生成用例」生成相关测试用例批量生成多类型AI用例,并智能补充用例,提升用例覆盖面质效革新
·
智领未来
主办方:TesterHeme2025-02-2721:34:47测
试
类型
:
业务功能模
块□
-□兼
容
合
规功
能
点首页疗愈音乐卡片展
示首页疗愈音乐卡片展
示首页疗愈音乐卡片展
示异
常
性
能验
证
点安卓系统兼容性鸿蒙系统兼容性OPPO手机兼容性步
骤1.在不同安卓系统版本上打开首页2.查看疗愈音乐卡片展示效果1.在鸿蒙系统上打开首页2.查看疗愈音乐卡片展示效果1.在OPPO手机上打开首页2.查看疗愈音乐卡片展示效果共生成用例60条,已选择0条自研(星云)预期结果1.所有系统版本均可正常打开首页2.卡片大小、圆角、间距一致1.鸿蒙系统可正常打开首页2.卡片大小、圆角、间距一致1.OPPO手机可正常打开首页2.卡片大小、圆角、间距一致自研(星云)业
务
功
能
8+
4业务背景
功能描述样例业务功能×兼容×
合规×
异常×性能×听首页疗愈音乐卡片展示(主要看大小,圆角,间距)采纳用例全选
上传图片
生成用例<会话列表
+新会话
抽样能力测试补充用例
②2.在删除本地歌曲会先从localMusic
表删除,将删除的本地歌曲添加到localMusicDeleteTemp
表
,
异
步
删
除
CloudFiles删除后autoDownloadDeleteFlag设置为1下载文件:/Documents/kgmusic
或加密的文件夹/Documents/kgmusic/downloadencryptfile,file_holder,file_downloading
表存在filemgr.sqlite
数据库内:ilemgr.sqlite
的路径/Library/ApplicationSupport/com.kugou.kugou1002178899【20改版性能】启动播放bar
等待加载歌曲信息后再进场【20改版性能】播放bar启动优化(0%-90%)背景:启动过程中,底部bar的图片由默认图切到歌曲封面会闪一下,体验不好方案:参考Q
音,在歌曲加载成功后再执行渐入动画(交互已经产品同意,设计认可,并把方案同步给安卓)178794功能描述及测试点:听首页疗愈音乐卡片展示(主要看大小,圆角,间距)业务背景:未填写使用测试类型「业务功能」「兼容」「合规」「异常」「性能」,参考以上业务背景,给出以上功能描述及测试点的测试用例按需选择测试类型补充用例智能丰富和智能补充用例-效果MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA2025上海站使用说明②通过交枪业务,持续提升用例生成准确性从流程上分析
从使用者分析归纳需求点初级系统测试(了解业务和测试方法)可变数据业务知识prompt
资深系统测试(
熟悉业务和测试方法)实时生成用例字段清洗数据聚合mysql持久化存储审核业务知识prompt测试方法主办方:TesterHeme结论:交枪业务测试同事维护业务知识和prompt,
并做好审核机制质效革新
·
智领未
来API
ServerTCPHTTP数据存储按产品隔离酷狗音乐酷狗直播抽离出配置服务新增/修改业务知识prompt测试方法进一步提升生成用例准确性MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025Al模型底座生成用例解决方案prompt编排需求点88
kafkacache页面显示用例类型prompt/
业务知识mysql基础配量测试开发上海站核
心
服
务一
、边界值测试方法涉及修改名称/文字内容/数量时1.数据过长时,可以保存成功,界面可以展示完全/缩起2.数据为空或者为0时,不能保存成功,界面给出合理提示或者展示默认值3.数据不合法/错误时,不能保存成功,界面给出合理提示4.数据在需求要求范围之内,可以保存成功,界面可以展示完全/缩起5.数据在需求要求范围之外,不能保存成功,界面给出合理提示举例:如果我们要为一个接受年龄输入的应用程序设计边界值测试用例,可以按照以下步骤:
输入域:年龄(数值型)。最小年龄(例如0岁)。
测试用例设置方式最大年龄(例如120岁)。比最小年龄小1的值(例如-1岁)。比最大年龄大1的值(例拉口121岁)。基于上述边界值,我们可以设计以下测试用例:序号测试用例ID
输
入
值
预
期
结
果接受输入接受输入拒绝输入或提示错误拒绝输入或提示错误二
、等价类测试方法1.根据需求内容确定所有可能的输入值域2.输入域划分为有效等价类和无效等价类。有效等价类指在该类中,至少有一个测试用例可以被执行,3.从每个有效等价类中选择一个或多个代表性的测试用例,确保覆盖所有有效等价类。举例:如果我们要为一个计算器应用程序的加法功能设计测试用例,可以按照以下步骤:输入域:两个整数的加法。有效等价类:刻试类型
性
能Prompt
耀加人性能为维度的相关测试用例,其中性能又分为:常规性能。内存世高、时适。常规性能进一步编分为:1.业势场景考虚CPU.内存、温度、电量、F等指棕在合理添幅图内内存世满进一步铝务为:1.多次进人功能再遭出功能、前后台切换节多次操作,看内存是否回收2.进入功能,再通出功能,不能增长,如果有增长需开发诚明原因,如有特殊情况(例加为了快会频存某些2.多次进入退出后都不停的有增长,需要修改时延进一步翅分为:1.65惯面1.5内打开,复夺页面移内2.原生页面打开速度;秒开常规的测试类型根据价格策略向不同用户提供不同的会员开通价格1、会员类型:豪华VIP价格,超级VIP价格,音乐包价格,豪华音乐包价格,升级超级VIP价格2、价格策略:常规价格,促销优惠价格,算法价格,冲量价格3、签约方式:连续包月,连续包季,连续包年,单月卡,单季卡,单年卡4、加购方式:加购听书,加购iOT,
加购联合会员(腾讯,优酷等)日常业务知识积累中国互联网测试开发大会TESTINGSUMMITCONFERENCECHINA2025交枪业务知识库、测试类型、测试方式的配置,可组合生成合理的Prompt进一步提升生成用例准确性-效果
MTSC2025质效革新
·
智领未
来
主办方:TesterHeme广告自会员自会员特权豪华VIP超级VIP□会员触点自会员价格自会员活动DIY播放器皮肤中心IOT评论2
A
助
手测试类型性
阅
席
周自
兼
容国
合
规自
体
验异
常园
弱
网理
点安
全
风
控通用用例AI
助手会员价格Al助手PromptBYT1BYT2BYT3
BYT4上海站0120-1121边界值:1234AI生成用例:根据需求内容智能生成用例选导入用例2.多轮对话生成用例3.筛新活名
种东
性用业务辩盐中填写使用金期,上台务音R,出上及m2先屋
校由M磁点楷证点zz
献timI
开
M
炉新配共堂:e
u
tL.B7-2221.2ac
.22e精
盖fn:性聪
W
世鸭加e
和味点即P灌出移模
和起1.红井贴出法入年级2蓄师面
.3.地值上R的程量重a临叶上阳上阳国an
生面叶上细道z平世跟上阳数1.9开用速人年望2.整停三3.在a平幼帮上幅如1.附开填用附进入再2.58道cDM
始5032.前中只4.橙意上的数量1.使用不开应障并遗人包修图2蓄件员露.检直上酸的数施1,事2zr平台编正军意跟祝上描的t
标地量1
.
页
相
律2不锦阳地下,上
的
数施正施1.三黑成动防神2
.
*
网
上
的
路
能停盘世务功能性晒雌体的异章胸网三耳陶印南日嘲下的
上颗炼保端上应嘴开
面
销北
4
rw22025-02苏19424类:L用的轮究要b微
1
u
t提u配前证造*片核式与u1场一
购性未片错式与u场一
性PnPFA共生成要有0条,已选择0蛋所澜三膜
细鹏品罩.2
查小
程
平
卡片
配的
u1.童共盟行正常mt
2
算
式
与
响
念
-
数.
与
格
甚
行1
.
5
员1
.
4
舞
示
正
常2
燕
南
功
量
卡
共
式1.气U图行地1
.
边明
面2.警试时小程序#对和资产网进中国互联网测试开发大会配套模块prompt工程AI补充用例:生成多类型
AI用例,并智能补充用例(
)【】我以高1世
5的际
简片i1
墙
量换(5【动效1北西
最近单庄增效1
6侯
用
现(6)【动效】批页_我喜欢鼎出动画根据已有用例取上常求描述补充生成组笑用例屋B【Al生成用例效果总结2助情育贵01
li2
湖
上金再码8,通12E
附E测试方法业务知识MTSC20251.需求内容概况/图片分析手是质效革新
·
智领未来主办方:TesterHeme
三22ALLEE上2JLLL三
1群F如
3t1.打所E
11F面t
4m测试类型T三上海站8iTeEDwTu试
30iai清空鱼话死瓣地龙t.2
*
共
与
确
金
-2
,
上
8
数
量
正a新未命名会话&林
充
单C断会话a◎话T,Al生成用例-技术prompt
召回、历史用例召回(RAG)、历史背景召回(GraphRAG)
、垂类模型、图片解MTSC2025中国互联网测试开发大会TESTINGSUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme析上
海
站MTSC2025Al
生成用例技术-
Prompt
工程解析用户输入,提取出知识库内容,拼装成完整的
Prompt模型调用星云KimiDeepseek生成用例AI用例1AI用例2AI
用例3用户筛选采纳主办方:TesterHeme系统Prompt
(规范生成格式)请按照以下格式生成用例:XX0CXXXXXXXOD000XXXXXXXX模板1模板2你是一个资深的软件测试人员。请根据用户输入设计测试用例以下是业务背景超
V业务描述可完整播放歌曲、切换超V音质、xxxx等以下是关联用例用例1用例2以下是功能描述超V功能进行了xxx变更变
更
1:XXXOX变更2
:
XXOX参考业务背景,结合关联用例,给出以上功能描述的测试用例超V
功能进行了xxx变更变更
1
:xXXX变更2
:xXXX质效革新
·
智领未来用户输入模型选择星云
KIMI
Deepseek测试类型功能业务背景会员功能描述中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA2025关联用例召回功能描述向量
化性能广告兼容皮肤上海站用例库向量
检
索关联用例生
成响
应大语
言
模
型通过在配置已有的知识库能力,召回历史参考用例,衔接llm
节点调快速完成LLM
解答问题或创作文本任务时,会在大规模文档库中搜索并筛选出与其紧密相关的素材增
强提
示
词质效革新
·智领未来
主办方:TesterHemeAl
生成用例技术-历史用例召回(RAG)MTSC2025中
国互联网测试开发大会MMIT
CONFERENCE
CHINA
2025查
询
内
容嵌
入
式
模
型自研st模型
结束(1)结果解析金开始国
resut
Stringquery
抽取{4
selet
peramchaL
node黄
model
jam检
索向量娄文据库模盟选择qwen
系模型4
modeLname哲含
proxylimELSM结果解析中结果解析
(res
ult相关文档查
询
内
容国
roquireimentnamereQurerentdes0财mod9umodebockground4
func如识检索onineugoujensleCG88上海站向
量
化用
户构遣samplefunctypeStmgIndexing
TimePipelineStageQueryTime质效革新
·
智领未来MTSC2025中国互联网测试开发大会业务各业务功能拆分功能实体知识功能相互关系功能块功能块摘要流程概述文本块拆分LLM
分析实体与
关系提取生成实体与关系检测与识别社区生成社区摘要Al
生成用例技术-历史背景召回(GraphRAG)图片来自Microsoft
GraphRAG论文Global
Answerquery-focused
summarizationCommunity
AnswersSource
Documentstextextraction
↓andchunkingText
Chunksquery-focused
summarizationCommunity
Summariesdomain-tailoredsummarizationGraph
Communitiesdomain-tailored↓summarizationElement
Summariesdomain-tailored↓summarizationElement
Instances主办方:TesterHemecommunity
detection上海站业务线文本块(拆分)业务线
模块
功能点与功能点“领取VIP”相关的模块和功能点如下:·H5
模块:·
点击开会员跳转至会员中心:用户点击领取VIP后,可以·
签到弹窗:签到弹窗中可能包含领取VIP的提示或按钮。·
广告展示:广告中可能包含领取VIP的活动信息。·听歌领会员H5
活动页面:
用户可以通过听歌活动领取VIF·
低门槛模式下听歌领H5
活动页面:低门槛模式下的听歌·
奖励下发:领取VIP后,系统会下发相应的奖励。·
播放页模块:·
领
取VIP后信息刷新:用户领取VIP后,播放页会刷新显示·领取VIP后队列歌曲检查:领取VIP后,系统会检查播放播放页模块是数字音乐应用中的一个重要部分,主要目的是提升用户在听·歌曲播放:支持歌曲的播放、暂停、快进、后退等基本操作。·会员期间离线播放:允许会员用户在离线状态下播放已下载的歌曲。·
播放页更多面板优化:提供更多的操作选项,如分享、收藏等。·
听歌领会员:通过听歌任务获取会员资格。·看视频会员:通过观看视频获取会员资格。·会员开通入口:提供会员开通的快捷入口。·
帖子播放:支持在播放页播放帖子内容。·领取VIP后信息刷新:用户领取VIP后,页面信息会自动刷新。·
队列歌曲检查:检查播放队列中的歌曲。·
换
队
列:允许用户更换播放队列。·
登录登出:支持用户登录和登出操作。实体关系历史背景召回(GraphRAG)-
构建知识图谱MTSC2025中国互联网测试开发大会TESTING
SUMMIT
CONFERENCE
CHINA
2025质效革新
·
智领未来主办方:TesterHeme简单描述下,播放页模块可能是做什么的?有哪些功能与功能点“领取vip*相关的模块和功能点有哪些上海站功能描述及测试点:极光模式和圆形模式,代码上合并成为
一
个模式,回测两个模式主功能业务背景:未填写5、播放页方形封面模式:有方形封面、全屏封面两种,默认为全屏封面6、播放页圆形封面模式:有极光幻音、旋转封面两种,默认为极光幻音,极光幻音封面控件需要下载极光素材,下载成功才能使用7、播放页皮肤底图模式:根据APP皮肤展示,有默认、耀夜、主题皮肤、自定皮肤多种效果,皮肤底图效果与主题皮肤有绑定逻辑,APP更换至主题皮肤时,播放页背景模式自动更换至皮肤底图功能点极光模式和圆形模式合并验证点模式切换功能步骤1.打开应用2.选择极光模式3.切换到圆形模式预期结果1.应用成功打开2.极光模式成功选择3.成功切换到圆形模式功能点验证点
步骤预期结果极光模式和圆形模式合并模式切换入口1.打开播放页
1.模式切换入口可正常点击2.点击模式切换入口
2.模式展示区域可正常滑动3.滑动模式展示区域至极光模式和
3.极光模式和圆形模式显示在同一圆形模式
选项中极光模式和圆形模式合并极光模式和圆形模式合并极光模式显示效果圆形模式显示效果1.打开应用1.应用成功打开2.选择极光模式
2.极光模式显示效果符合预期1.打开应用
1.应用成功打开2.选择圆形模式
2.圆形模式显示效果符合预期极光模式和圆形模式合并默认模式1.打开播放页
1.播放页成功打开2.检查当前模式2.当前模式为极光幻音极光模式和圆形模
式合并极光模式和圆形模式合并极光幻音模式旋转封面模式1.打开播放页2.选择极光幻音模式3.检查模式效果1.打开播放页2.选择旋转封面模式3.检查模式效果1.播放页成功打开2.极光幻音模式成功选择3.极光幻音效果正常显示1.播放页成功打开2.旋转封面模式成功选择3.封面旋转效果正常显示1.应用成功打开2.极光模式成功选择2.选择极光模式3.切换到圆形模式时动画流畅无3.切换到圆形模式顿1.打开应用1.应用成功打开极光模式和圆形模模式切换后的设置
2.选择极光模式
2.极光模式成功选择式合并
保存3.切换到圆形模式3.成功切换到圆形模式4.重启应用
4.重启后模式保持为圆形模式1.打开播放页
1.播放页成功打开极光模式和圆形模极光素材下载
2.选择极光幻音模式
2.极光幻音模式成功选择式合并3.检查极光素材下载提示
3.显示极光素材下载提示极光模式和圆形模式合并极光模式下的用户交互1.打开应用2.选择极光模式3.进行用户交互操作1.应用成功打开2.极光模式成功选择3.用户交互操作响应正常1.打开播放页
1.播放页成功打开极光模式和圆形模式合并极光素材下载成功2.选择极光幻音模式
2.极光幻音模式成功选择3.下载极光素材
3.极光素材下载成功上海站MTSC2025历史背景召回(GraphRAG)-加入业务背景生成效果对
国互联T
会025大NA
2发结合业务背景生成
主办方:TesterHeme
不理解业务
模式切换时的动画效果极光模式和圆形模式合并1.打开应用你是一个资深的软件测试人员。请根据用户输入设计测试用例,并满足以下要求:-
输出
一
个JSON
数组,数组中的每一个字典对象表示一条用例,对象中键包含:功能点、验证点、步骤、预期结果。-测试步骤用序号隔开,每个步骤结尾插入一个换行符预期结果中必须——体现出步骤中的检查项,有多个检查项时,用序号隔开,每个检查项结尾插入一个换行符-
同一个功能点,可拆分为多个验证点-用尽可能精简的语言描述功能点、验证点、步骤、预期结果-
输出10-20
条用例,若需求描述中有指定输出用例数,则按指定数量输出用例只需要输出JSON
数组本身,不需要其他描述性内容,不要输出反引号业务背景如下:{input}参考业务背景,给出以下需求的测试用例,用例的粒度尽可能细致{output}~第二步:
LoRA
轻量级微调hB=0PretrainedrA=
N(0,σ²)X数据准备"input":"In
你是一个资深的软件测试人员。请根据用户输入设计测试用例,并满足以下要求:\n-输出一个JSON数组,数组中的每一个字典对象表示
一条用例,对象中键包含:功能点、验证点、步骤、预期结果。In-测试步骤用序号隔开,每个步骤结尾插入一个换行符\n-预期结果中必须——体现出步骤中的检查项,有多个检查项时
可能精简的语言描述功能化,减少启动时长,减少不必要的代码执行@李东江\n5、定位概念版播放眼球时长,BI
时长异常问题,定位修复启动时长变长问题@陈懿思\n6、修复
AI物料判"output":"[{\"
功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表-触发预加载时机\",\"步骤\":\"第一页接口返回数10,浏览至第1个帖子\",\"预期结果\":\"不触发预加载下一页\"},{\"功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表-触发预加载时机\",\"步骤\":\"接口返回数10,浏览至第1~7个帖子\",\"预期结果\":\"不触发预加载下一页\"},{\"功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表-触发预加载时机\",\"步骤\":\"第一页接口返回数10,浏览至第8~10个帖子\",\"预期结果\":\"触发预加载下一
页\"},{"功能点\":\"帖子列表预加载优化",\"验证点\":\"单排帖子列表-触发预加载时机MMLU-ProGPQAMATHGSM8KHumanEvalMBPPMuliPLE2i982CodeLiveBench0831IFEval
strict-promptArenaHardAlignBenchv1.1MTbenchQwe
n-Plus86.849.083.195.886.688.275.155.552.384.181.28.169.35DeepSeek-V2.580.445.574.795.189.085.273.549.447.373.976.27.749.02Llama-3.1-405BInstru73.386.251.173.896.889.084.573.541.653.280.869.35.959.08Claude-3.5-Sonnet86.059.471.196.492.089.280.054.159.882.679.38.19核心思想:在不改变原始模型
参数的情况下,通过添加低秩
矩阵来捕捉任务特定的知识,从
而在特定子任务上训练预训练
模
型
时,仅通过较少参数的微
调便可以实现在当前子任务上
达到全量微调80%以上的性能.生成用例技术-垂类模型训练第一步:选择模型(qwen2.5)4
功
E
3
,
I
I·I
山
口丁进
八
中
口
抽
贝
,
l
J火结果!":\"功能正赏”,("功能点”:\“”帖子列表预加载优化",\“验证点!:"单排帖子列表基础功能回归","步骤:“点击歌曲信息bar
条,触发歌曲播放”,1"预期预期结果\":\"功能正常\"},{"功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表基础功能回归\",\"步骤\":\"点击点赞按钮\",\"预期结果\":\"功能正常\"},{\"功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表基础功能回归\",\"步骤\":\"长按帖子,触发不感兴趣弹窗\",\"预期结果\":\"功能正常\"],"system_prompt":"
你是资深的软件测试专家"州
输
出
历
史
用
例下一页\"},{"功能点\":\"帖子列表预加载优化\",
":\"浏览至第8~10帖子,触发预加载正常\"},{"功
现触发顶部页面刷新\",\"预期结果\":\"浏览至第
、
M、,,
、
输人
业
务
需
求
业
务
知
识
技一术页需数求
据1、,,身本组数N顺二他更放其览播要浏增需让新不卡nnY载号果\\加结引放期反播预出控输监骤要率证内冲验性缓述次描点MTSC2025中国互联网测试开发大会TESTINGSUMMIT
CONFERENCE
CHINA2025"
,
步
"
时:\
加u载第上二
成
加,
8
1成7帖子
",\
"云预1期9
0果\
"
:了\"不
预
用载下
页\
,
{
功
能下点\
:
"帖"子功
能表点预\
:
了
表,主\预"验加证
单,I"U排验
证
"表:\-"中结日“"子占02~814力工成页一载1步""、载力中机
I""\\化":列\"帖优"载"加m\页"如"o结页~机"质效革新
·
智领未
来主办方:TesterHeme畅,提高用户体验,可以参考小红书@童侠\n3、iOS概念版支持offercodes
支付能力,参考航母代码@李东江\n4、消息中心数据整合启动做数据库迁移优断数据本地存储异常问题,处理方式:1、去重处理2、子线程操作防止启动卡死等问题@杨强\n7、定位、修复线上历史崩溃
'\
n
",结果\":\"功能正常\"},{\"功能点\":\"帖子列表预加载优化\",\"验证点\":\"单排帖子列表基础功能回归\",\"步骤\":\"点击帖子发布者信息,进入个人信息页\",\"微调训练8~10帖子,触发预加载正常\".
{"功能点\":\"帖子列表预加载优化I".\"验证点\":\"单排帖子列表基础功能回WeightsW∈Rd×d指令筛选上海站Alench"功能点":“新增播放二次缓冲率APM”,"验证点":“播放加载卡频监控",“步骤”:“1.打开应用并播故视频2.模拟网络不稳定3.观察APM
数据”。“预期结果”;"APM
数据能准确反映插放加载卡顿情况""功能点"
"苔页加载下一页忧化"。捉前加载下一页数据”。"步骤":打开首页2
.滑动接近底部3
.观察加教情况”"预期结果”:"下一页数据在接近底部时已加载完成,浏览膝畅"功能点":“i05
概念版支持offer
codes
支付能力",“验证点”:“affer
codes支付流程”,“步骤”:"1
.
选择商品2
.
选择使用
offer
code-3.完成支付"。扫
里
+
古
付
流
理
场
nffntcad
南
典
成
十主办方:TesterHeme●
目前通过sft
qwen7B小模型,进行微调训练后效果目前通过sft
qwen7B小模型"功能点":“新增播故二次缓冲率APM””点:":“"播放视加频载,卡观顿察问播题放监过控程"中。是否有卡顿现象"预期结果":“播放过程中无明显卡顿现象”"功能点"::"
摇放视频观察插放过程中卡"预期结果”:“卡顿次数明显减少"“功能点”:“新增播故二次缓冲率APM”,“验证点”:“播放加载卡顿问题监控“,“步骤”;“播故视频。观察播放过程中卡频时长”。“预邯
结
里
”"卡场
长
显
少
"质效革新
·智领未来骤点步证预期结果中必须点,可数可,
n用题,参考航母(航母对应APMID为:侠\n3.◎陈懿思n6
、
修复A
物料判断强n7、定位、用n2.播放视频n3.
观察播放是否卡顿”,“预期结果”:1n2.
插放视频n³
.
观察指放是否卡颗”,“预期结嫣整合后动做统据库近移优化:“.证盘产:用形少2。动择据整合启动做数据库迁移优化”“证点长:“减少不A
物料判断数据本地存储异常问题:“验证点:“去”,"验载下一页数据”,“步骤首页加载下一页优化”,“验证点”:"提高用户体
概念版支持nffercodes
支付能力”,“验证预期结果:。能点:“消息中心数据”,“预期结果":“1“)你是一个资深的软件测试人员。请根据用户输入设计测试用例,并满足以下要求:In-输出
一
个JSON
数组,数组中的每一个字典对象表示一条用例,对象中键包含:功能点、验证点、步骤、预期结果。\n-测试步骤用序号隔开,每个步骤结尾插入一个换行符\n-
预期结果中必须一—体现出步骤中的检查项,有多个检查项时,用序号隔开,每个检
查项结尾插入一个换行符\n-
同一个功能点,可拆分为多个验证点\n-用尽可能精简的语言描述功能点、验证点、步骤、预期结果\n-输出10-20条用例,若需求描述中
有指定输出用例数,则按指定数量输出用例\n-只需要输出JSON
数组本身,不需要其他描述性内容,不要输出反引号\n\n\n参考业务背景,给出以下需求的测试用例,用
例的粒度尽可能细致\n背景信息如下:【概念版】新增播放二次缓冲APM1、
新增播放二次缓冲率APM,监控播放加载卡顿问题,参考航母(航母对应APMID
为
:
4
0
0
1
8
)
@李东江\n2、首页加载下一页优化,提前预计加载下一页数据,让浏览更顺畅,提高用户体验,可以参考小红书0童快n3、ioS
概念版支持
offer
codes支付能力,参考航母代码
@李东江\n4、
消息中心数据整合启动做数据库迁移优化,减少启动时长,减少不必要的代码执行@李东江\n5、定位概念版播放眼球时长,BI
时长异常问题,定位修复启动时长变
长问题◎陈懿思\n6、修复A物料判断数据本地存储异常问题,处理方式:1、去重处理2、子线程操作防止启动卡死等问题仓杨强\n7、定位、修复线上历史崩溃@陈懿思●混元原版7B/qwen2.57B,
可以看到对于我们线上复杂的promp
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2025年工业自动化控制系统集成合同协议(SCADAHMI)
- 2025年工业直播摄影合同协议
- 2025年工业园区充电桩租赁合同协议
- 2025深圳公务员考试真题及答案大全
- 高速公路高填方路基施工中的问题及解决方案
- 2025年安徽省宿州市医疗三严三基理论考试题库及答案
- 茶叶行业茶叶品鉴培训推广方案
- 冲击继电器建设项目可行性分析报告(总投资12000万元)
- 年产xxx声讯系统项目可行性分析报告
- 化工实验设备项目可行性分析报告范文(总投资14000万元)
- 钢厂采购员设备管理制度
- 交流轮岗挂职管理办法
- 2025年社区工作者考试真题库附答案
- 亚投行贷款项目管理办法
- 全国大学生职业规划大赛《电子信息工程》专业生涯发展展示
- 学校意识形态领域风险防控机制意识形态领域风险
- 严重精神障碍患者家庭护理-培训课件
- 承插型盘扣式钢管脚手架体设备设施风险分级管控清单
- 脑出血患者营养治疗讲课件
- 十五五学校发展规划中期自评报告
- 成都高新辅警心理测试题及答案
评论
0/150
提交评论