CN120296652A 一种多模态数据的知识图谱构建方法 （政和科技股份有限公司）

本发明公开了一种多模态数据的知识图谱因子Gdf，并采用强化学习优化知识实体关联权模态匹配度指数Mcf，并基于对数几何平均数动2步骤四、采用跨模态对比学习方法提取跨模态匹配相关模型对匹配的知识实体进行自适应分组，并根据知识实体的语义相关性计算相似度阈值，3采用强化学习方法构建知识实体关联权重优化模型，并将用户最后，基于用户群体特征建立个性化知识实体索引，利用增量若搜索环境适配因子Gdf≥搜索环境适配阈值H1，则判定当前搜索环境已匹配足够的若搜索环境适配因子Gdf＜搜索环境适配阈值H1，则判定当前搜索环境未匹配足够的预设跨模态匹配度阈值M与跨模态匹配度指数Mcf进行对比评估，当跨模态匹配度指数Mcf≥跨模态匹配度阈值M，则表示当前跨模态匹配度满足要求，4当跨模态匹配度指数Mcf＜跨模态匹配度阈值M，则当前模态数据匹配度不满足要求，此时动态调整各模态数据的权重，包括优先调整模态数据匹配度最低的权重以及迭代调最后采用统一高维知识表示方法，将不同模态数据映射至共首先，获取上下文感知知识图谱中的知识实体及其关联信息，并实时采实时采集上下文感知知识图谱中的知识实体以及知识实体关联信息，并通过对文本、预设多模态适配阈值Q，与多模态适配度指数Qms进行对比评估，实时当多模态适配度指数Qms≥多模态适配阈值Q：当前多模态匹配度满足知识检索需求，当多模态适配度指数Qms＜多模态适配阈值Q：当前多模态匹配度不满足知识检索需5建逐步从基于规则的手工构建转向基于自动化的语义分析和6互路径在内的特征信息，接着通过构建用户行为预测模型实时获取搜索环境适配相关数7[0027]若搜索环境适配因子Gdf≥搜索环境适配阈值H1，则判定当前搜索环境已匹配足[0028]若搜索环境适配因子Gdf＜搜索环境适配阈值H1，则判定当前搜索环境未匹配足8Mcc以及搜索偏好度Upp并进行无量纲处理后，结合以下公式计算获取多模态适配度指数[0050](2)该一种多模态数据的知识图谱构建方法，针对现有知识图谱构建方法缺乏上[0051](3)该一种多模态数据的知识图谱构建方法，针对现有知识图谱构建方法在多模9[0053]图2为本发明一种多模态数据的知识图谱构建方法的搜索环境适配因子Gdf仿真[0054]图3为本发明一种多模态数据的知识图谱构建方法的跨模态匹配度指数Mcf仿真[0055]图4为本发明一种多模态数据的知识图谱构建方法的多模态适配度指数Qms仿真互路径在内的特征信息，接着通过构建用户行为预测模型实时获取搜索环境适配相关数[0081]若搜索环境适配因子Gdf≥搜索环境适配阈值H1，则判定当前搜索环境已匹配足[0082]若搜索环境适配因子Gdf＜搜索环境适配阈值H1，则判定当前搜索环境未匹配足时间以及交互路径在内的特征信息，并基于用户行为预测模型获取搜索环境适配相关数取搜索环境适配相关数据中的搜索意图偏移度Sip，用于衡量用户搜索目标的稳定性和跳概率由搜索历史路径和知识实体访问频率Kaf确定，确保搜索结果能够随着用户需求的变Mcc以及搜索偏好度Upp并进行无量纲处理后，结合以下公式计算获取多模态适配度指数入向量，采用余弦相似度或跨模态对比学习方法计算模态间的一致性；计算搜索偏好度10.580.880.510.6420.80.840.530.7130.810.950.