CN119537576A 一种数据分析方法及相关系统 (华为云计算技术有限公司)_第1页
CN119537576A 一种数据分析方法及相关系统 (华为云计算技术有限公司)_第2页
CN119537576A 一种数据分析方法及相关系统 (华为云计算技术有限公司)_第3页
CN119537576A 一种数据分析方法及相关系统 (华为云计算技术有限公司)_第4页
CN119537576A 一种数据分析方法及相关系统 (华为云计算技术有限公司)_第5页
已阅读5页,还剩53页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

2根据所述输入内容进行意图分类,确定所述输入内容指示的任务根据所述子任务类型,对所述历史对话关联内容进行处理获取所述输入内容的特征向量,以及获取所述用户的至少一个对话主题树的特征向自然语言和/或从所述自然语言中解析的标签,所述对话主题树的特征向量根据所述对话确定所述输入内容的特征向量和所述目标主题树中至少一个节点的特征向量的相似当所述输入内容的特征向量与所述目标主题树中目标节点的特征向量的相似度满足针对所述目标主题树,创建一个归属于所述目标节点的子所述输入内容的特征向量与所述至少一个对话主题树的特征向量的相似度均不满足创建一个新的对话主题树,所述对话主题树包括3分流控制子系统,用于根据所述输入内容进行意图分类,的任务类型为所述指令式任务,通过指令关键词匹配确定所述指令式任务的子任务类型,获取所述输入内容的特征向量,以及获取所述用户的至少一个对话主题树的特征向自然语言和/或从所述自然语言中解析的标签,所述对话主题树的特征向量根据所述对话确定所述输入内容的特征向量和所述至少一个对话主题树的特征确定所述输入内容的特征向量和所述目标主题树中至少一个节点的特征向量的相似当所述输入内容的特征向量与所述目标主题树中目标节点的特征向量的相似度满足针对所述目标主题树,创建一个归属于所述目标节点的子所述输入内容的特征向量与所述至少一个对话主题树的特征向量的相似度均不满足创建一个新的对话主题树,所述对话主题树包括45术的突破和应用,围绕着自然语言的自然语言至结构化查询语言(naturallanguageto据分析系统。自然语言辅助的数据分析系统包[0007]本申请提供了一种数据分析方法,该方法能够支持数据分析结果为预期外结果6见即所得”的交互也可以通过将指令操作预制为统获取用户的至少一个对话主题树的特征向量。对话主题树的每一个节点记录一轮对话信[0014]该方法通过将输入内容的特征向量与目标主题树中节点的特征向量进行相似度7的自然语言和/或从所述自然语言中解析的标签,所述对话主题树的特征向量根据所述对[0030]当所述输入内容的特征向量与目标主题树的特征向量的相似度满足第一设定条[0032]确定所述输入内容的特征向量和所述目标主题树中至少一个节点的特征向量的[0033]当所述输入内容的特征向量与所述目标主题树中目标节点的特征向量的相似度8[0037]所述输入内容的特征向量与所述至少一个对话主题树的特征向量的相似度均不9[0054]图4为本申请实施例提供的一种数据分析系统进行数据查询和分析的交互流程示[0058]图8为本申请实施例提供的一种数据分析结果导入分析引擎仪表板的界面示意特定类问题优化,包含更高级抽象的编程语言。DSL通常使用来自专业或领域的概念和规则。[0071]对于用户从零开始探索式分析数据,并希望从中快速发被广泛应用于数据分析领域。自然语言辅助的数据分析系统可以包括以下类型:自然语言见即所得”的交互也可以通过将指令操作预制为统[0077]参见图1所示的一种数据分析系统的架构示意图,该系统10包括交互子系统100、[0078]在一些可能的实现方式中,交互子系统100包括前端输入模块102和UI交互模块[0080]分流控制子系统200是数据分析系统10中实现兼具自然语言输入和“所见即所得”同的交互操作在本系统中支持统一的实现入口,分流控制子系统200实现了一个基于意图分类和上下文控制的算法流程,使用户不同的自然语言分流到分析子系统300中各自对应模块202用于对自然语言(用户输入的自然语言或指令语言生成模块转换的自然语言)进行[0083]在意图分类的第一阶段,问答分类模型可以确定用户的输入内容指示的任务类型,从而区分用户基于自然语言是希望开展一次全新的基于自然语言的分析任务(如[0084]考虑到执行自然语言查询的语句和执行指令化操作的语句在句法结构和实体匹[0085]具体实现时,数据分析系统10(例如是数据分析系统10中的问答分流模块202)可以将自然语言整句输入预训练的自然语言模型(也称作预训练模型)来实现对于自然语言务的自然语言直接被分流到分析子系统300的NL2SQL模块,而被分类为指令化意图的自然106将操作预制为统一的自然语言,保证数据分析师在多轮问答流程中的连续性和沉浸式轻量级的由关键词匹配指导的规则化模型实现子任务意图分类[0095]上下文控制模块204可以通过上下文控制模型实现上下文获取。上下文控制模型用户基于自然语言进行的每轮对话问答内容进行建模。在本系统提出的上下文控制模型包括用户输入的自然语言和/或从自然语言中解析的标签。如此可以描述用户在多轮问答[0097]图3示出了一种对话主题树的结构示意图,每当用户进行一次基于自然语言的分用户对于NL2SQL返回的图表进行所见即所得的交互操作或基于自然语言的指令式操作(如于上述的指令式操作均可执行多次,且可以针对历史户手动基于所见即所得交互选择执行或基于上下文控制模型最终选择到的对话),每当用户进行该操作时,数据分析系统10维护的问题主题树可以在当前选择进行更新的节点下,增强分析模块307或图表推荐模块308进[0114]查询分析模块302的NL2SQL模型可以拆解为字段关联、知识推理和SQL优化生询模块304旨在从已有的图表的标签定义的数据结构,构建出代表图表槽位信息的领域专[0121]领域专业语言的设计作为沟通前端页面交互的标签展示和高效SQL语句拼接生成[0126]增强分析模块307用于对用户基于自然语言输入和UI交互生成的图表执行模式识析到的数据一同传递给UI交互模块104,将数据和分析标注以可视化的形式最终呈现给用[0128]从可集成的任务丰富度层面来看,一个典型的增强分析模块307可以具有良好的[0129]图表推荐模块308旨在构建从查询执行引擎返回的数据/元数据和分析标注到可[0130]图表类型推荐:图表推荐模块308支持对于查询返回的数据自动选择使用的图表[0135]本系统设计的图表推荐模块308中输入考虑包括查询返回的表字段元数据和数量意味着使用大量的可视化元素来编码数据,在有限的视觉关注区域内会造成视觉拥挤,[0141]本申请的数据分析系统10可以是一种BI场景下自然语言和所见即所得交互混合[0143]图4展示了一种数据分析系统进行数据查询和分析的交互流程,具体包括如下阶[0145]用户可以通过点击任何推荐的主题标签按钮,使当前对话的主题切换到目标主对于图表的美观呈现都能获得其定制的最优包括所述用户输入的自然语言和/或从所述自然语言中解析的标签,对话主题树的特征向[0157]数据分析系统10可以确定所述输入内容的特征向量和所述至少一个对话主题树分析系统10可以确定输入内容指示的任务类型节点的特征向量的相似度满足第二设定条件,数据分析系统10获取目标节点的特征向量。[0173]图6中展示的界面是分析引擎仪表板查看态的内容,其中左侧为用户已保存的仪数据分析结果的图表应用到分析引擎的仪表板拟化技术在多个物理主机(如计算设备)上虚拟出虚拟机(vir户按需提供BMS进行使用的服务。容器服务是在多个物理主机上虚拟出容器资源池以为用块204也可以通过软件或硬件实现,分析子系统300中的查询分析模块302、指令处理模块的自然语言和/或从所述自然语言中解析的标签,所述对话主题树的特征向量根据所述对[0188]当所述输入内容的特征向量与目标主题树的特征向量的相似度满足第一设定条[0190]确定所述输入内容的特征向量和所述目标主题树中至少一个节点的特征向量的[0191]当所述输入内容的特征向量与所述目标主题树中目标节点的特征向量的相似度[0195]所述输入内容的特征向量与所述至少一个对话主题树的特征向量的相似度均不[0206]总线902可以是外设部件互连标准(peripheralcomponentinterconn[0207]处理器904可以包括中央处理器(centralprocessingunit,CPU)、图形处理器[0208]存储器906可以包括易失性存储器(volatilememory),例如随机存取存储器(randomaccessmemory,RAM)。存储器906还可以包括非易失性存储器(non_volatile有数据分析系统10用于执行数据分析方法的个或多个计算设备900中的存储器906中可以存有相同的数据分析系统10用于执行数据分[0212]在一些可能的实现方式中,该计算设备集群中的一个或多个计算设备900也可以备900的组合可以共同执行数据分析系统10用于[0215]图11所示的计算设备集群之间的连接方式可以是考虑到本申请提供的数据分析方法需要大量算力进行数据分析。因此,考虑将分析子系统300实现的功能交由计算设备[0216]应理解,图11中示出的计算设备900A的功能也可以由多个计算设备900完成。同储器906中存有执行分析子系统300的[0218]图12所示的计算设备集群之间的连接方式可以是考虑到本申请提供的数据分析方法需要大量算力进行数据分析,因此考虑将分析子系统300实现的功能交由计算设备[0219]应理解,图12中示出的计算设备900C的功能也可以由多个计算设备900完成。同是计算设备能够存储的任何可用介质或者是包含一个或多个可用介质的数据中心等数据备执行上述应用于数据分析系统10用于执以是包含指令的,能够运行在计算设备上或被储存在任何可用介质中的软件

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论