CN119421013A 一种基于大语言模型的体育比赛解说生成方法 （同济大学）

一种基于大语言模型的体育比赛解说生成本发明提出的是一种基于大语言模型的体模型的体育比赛解说生成系统进行体育比赛解出的动作信息输送给大语言模型解说模块和解块利用大语言模型对接收到的动作信息进行处将视频分析模块识别出的动作信息与大语言模2的体育比赛解说生成系统进行体育比赛解说的步骤2）将视频分析模块识别出的动作信息输送给大语言模型解说模块和解说生成系步骤4）利用解说生成系统开发模块将视频分析模块识别出的动作信息与大语言模型2.根据权利要求1所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所3.根据权利要求1所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所4.根据权利要求1所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所述利用视频分析模块识别体育赛事视频中的动作信息的具步骤1_2）使用基于卷积神经网络结构的边界匹配网络对动作发生的起止时间进行定5.根据权利要求1所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所述大语言模型解说模块利用大语言模型对接收到的动作信息进行处理生成解说，具体包6.根据权利要求5所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所7.根据权利要求6所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所3媒体英文转播视频的人工解说脚本；解说知识库的内容格式为markdown和pdf两类；使用所述大语言模型接入Langchain框架具体包括：获取智谱GLM4大语言模型智谱GLM4大语言模型API接入Langchain框架，Langchain提供从提示词输入大语言模型到8.根据权利要求6所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所述解说知识库向量化并存储到解说知识向量数据库UnstructuredMarkdownLoader用于读取markdown格式的解说教程和知识内容；使用PyMuPDFLoader对解说文本pdf文件进行解析；将markdown和pdf格式的解说知识库内容统接下来使用智谱的向量化API将分段后的解说知识库中的内容向量化形成向量化的结9.根据权利要求5所述的一种基于大语言模型的体育比赛解说生成方法，其特征是所述步骤4）利用解说生成系统开发模块将视频分析模块识别出的动作信息与大语言模型解45所述利用基于大语言模型的体育比赛解说生成系统进行体育比赛解说的具步骤2）将视频分析模块识别出的动作信息输送给大语言模型解说模块和解说生步骤3）大语言模型解说模块利用大语言模型对接收到的动作信息进行处理生成步骤4）利用解说生成系统开发模块将视频分析模块识别出的动作信息与大语言6步骤1_2）使用基于卷积神经网络结构的边界匹配网络对动作发生的起止时间进及高规格赛事的知名媒体英文转播视频的人工解说脚本；解说知识库的内容格式为markdown和pdf两类；使用Jina.ai/ReaderAPI工具提取网页html内容并转为markdown格程将智谱GLM4大语言模型API接入Langchain框架，Langchain提供从提示词输入大语言模型到大语言模型输出结果解析的链式结构；加载步骤3_1_3）中存储的解说知识向量数据首先编写代码进行解说知识库的文件读取和解析，使用Langchain框架中的UnstructuredMarkdownLoader用于读取markdown格式的解说教程和知识内容；使用PyMuPDFLoader对解说文本pdf文件进行解析；将markdown和pdf格式的解说知识库内容统7接下来使用智谱的向量化API将分段后的解说知识库中的内容向量化形成向量化[0017]附图1基于大语言模型的体育比赛解说生成系统生成体育赛事解说的方法流程示8的体育比赛解说生成系统进行体育比赛解说的具体过程包括步骤2）将视频分析模块识别出的动作信息输送给大语言模型解说模块和解说生步骤3）大语言模型解说模块利用大语言模型对接收到的动作信息进行处理生成步骤4）利用解说生成系统开发模块将视频分析模块识别出的动作信息与大语言[0024]本发明中解说生成系统开发模块将视频分析模块和大语言模型解说模块结合起[0025]所述利用视频分析模块识别体育赛事视频中的动作信息，优选采用PaddleVideo开源的通用体育动作识别方法对体育赛事视频中的动作信息进行识别；PaddleVideo开源的通用体育动作识别方法可以准确识别出体育赛事视频中动作的类型并且定位该动作发[0026]所述PaddleVideo开源的通用体育动作识别方法对体育赛事视频中的动作信息进步骤1_1）使用二维卷积神经网络PP_TSM（PaddlePaddle_TemporalShift9[0027]以足球为例，所述PaddleVideo开源的通用体育动作识别方法使用的数据集来源小时不等，PaddleVideo开源的通用体育动作识别方法使用的数据集中对视频中的技术动容格式为markdown和pdf两类；使用Jina.ai/ReaderAPI工具提取网页html内容并转为行解说知识库的文件读取和解析，使用Langchain框架中的UnstructuredMarkdownLoader然后向量化的结果存储在Langchain框架集成的轻量化向量数据库Chroma中，得到解说知将智谱GLM4大语言模型API接入Langchain框架，Langchain提供从提示词