CN119493986A 标注方法、装置、设备及存储介质 （北京罗克维尔斯科技有限公司）

2通过至少一个应答模型对所述指令数据进行应答，得到与所述指令将所述指令数据和所述目标应答数据确定为接收所述用户在所述多个应答数据中选择第一应答数据的第接收所述用户在所述多个应答数据中选择第二应答数据的第式标注标准，所述内容标注标准包括所述应答数据和所述指令数据之间的内容相关性标接收所述用户在所述多个应答数据中选择所述第一子应答数据的第式标注标准，所述内容标注标准包括所述应答数据和所述指令数据之间的内容相关性标接收所述用户在所述多个应答数据中选择所述第二子应答数据的第针对第一目标任务类型，获取所述至少一个应答模型在第一预设周期内输出的i个应3第三子应答数据为所述用户确定的符合所述第一目标任务类型对应的标注标准的应答数在所述第一比例小于第一预设阈值的情况下，获取与所述第一利用所述多个第一数据对对与所述第一目标获取目标应答模型在第二预设周期内输出的与第二目标任务类型对应的m个应答数据和n个第四子应答数据，所述第四子应答数据为所述用户确定的符合所述第二目标任务类型对应的标注标准的应答数据，所述目标应答模型为所述至少一个应答模型中的任意一在所述第二比例小于第二预设阈值的情况下，获取与所述第二应答模块，用于通过至少一个应答模型对所述指令数据进行应第一确定模块，用于响应于所述用户在所述多个应答数据所述处理器执行所述计算机程序指令时实现如权利要求1_7任意一项所述的标注方程序指令，所述计算机程序指令被处理器执行时实现如权利要求1_7任意一项所述的标注4[0004]但是，人工标注往往需要用户手动编写指令数据以及与指令数据对应的应答数答数据为所述用户确定的符合所述目标标注标准的答数据为所述用户确定的符合部分所述目标标注标准的5[0021]在一种可能的实现方式中，所述目标标注标准包括内容标注标准和格式标注标第一子应答数据为所述用户确定的符合所述内容相关性标准和所述应答格式模板的应答[0023]在一种可能的实现方式中，所述目标标注标准包括内容标注标准和格式标注标[0026]针对第一目标任务类型，获取所述至少一个应答模型在第一预设周期内输出的i所述第三子应答数据为所述用户确定的符合所述第一目标任务类型对应的标注标准的应[0029]利用所述多个第一数据对对与所述第一目标任务类型对应的应答模型进行迭代[0031]获取目标应答模型在第二预设周期内输出的与第二目标任务类型对应的m个应答数据和n个第四子应答数据，所述第四子应答数据为所述用户确定的符合所述第二目标任一个，所述第二目标任务类型为所述目标应答模型对应的至少一个任务类型中的任意一6[0042]所述处理器执行所述计算机程序指令时实现上述第一方面中任一种可能的实现7[0055]在标注之前，管理用户可以先根据大型语言模型的微调需求和任务制定标注任8若标注平台包括一个应答模型，则一个应答模型可以输出与指令数据对应的多个应答数标注平台包括多个应答模型，则每个应答模型对应的任务类型的数量和种类可以是不同标标注标准为与指令数据的任务类型对应的标9至少包括用户认为第二应答数据与指令数据之间的内容相在多个应答数据中查找第二应答数据。若用户确定第二应答数据符合部分目标标注标准，也可以用于数据探索和分析，以根据分析结果对本申请实施例中的应答模型进行迭代优[0102]除此之外，本申请实施例中方法的其它步骤可参见上文图1所示实施例的相关描[0104]针对第一目标任务类型，获取至少一个应答模型在第一预设周期内输出的i个应型对该任务类型的应答能力较弱，则可以获取多个第一数据对对应答模型进行迭代优化。[0113]获取目标应答模型在第二预设周期内输出的与第二目标任务类型对应的m个应答数据和n个第四子应答数据，第四子应答数据为用户确定的符合第二目标任务类型对应的应答模型对第二目标任务类型的应答能力较强。第二预设阈值和第一预设阈值可以相同，[0140]第一确定模块440，用于响应于用户在多个应答数据中确定目标应答数据的目标[0144]第一接收子模块，用于接收用户在多个应答数据中选择第一应答数据的第一输[0148]第二接收子模块，用于接收用户在多个应答数据中选择第二应答数据的第二输注标准包括应答数据和指令数据之间的内容相关性标准，格式标注标准包括应答格式模[0154]第一接收单元，用于接收用户在多个应答数据中选择第一子应答数据的第二输[0157]第二接收单元，用于接收用户在多个应答数据中选择第二子应答数据的第二输标任务类型对应的标注标准的应答数据，目标应答模型为至少一个应答模型中的任意一包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介[0181]需要明确的是，本申请并不局限于上文所描述并在图中示出的特定配置和处[0184]上面参考根据本申请的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的个方框以及框图和/或流程图中的方框的组合，也可以由执行指定的功能或动作的专用硬本技术领域的技术人员在本申请揭露的技