CN113889059B 一种基于音视频节奏关系的视频背景音乐自动生成方法 （北京航空航天大学）_第1页
CN113889059B 一种基于音视频节奏关系的视频背景音乐自动生成方法 （北京航空航天大学）_第2页
CN113889059B 一种基于音视频节奏关系的视频背景音乐自动生成方法 （北京航空航天大学）_第3页
CN113889059B 一种基于音视频节奏关系的视频背景音乐自动生成方法 （北京航空航天大学）_第4页
CN113889059B 一种基于音视频节奏关系的视频背景音乐自动生成方法 （北京航空航天大学）_第5页
已阅读5页，还剩10页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

MusicGenerationwithControllableMu一种基于音视频节奏关系的视频背景音乐本发明提供了一种基于音视频节奏关系的征所在节奏位置自动替换为相应节奏位置的音景音乐。本发明可快速为视频自动生成背景音2获取视频与音乐数据库中的视频节奏特征和音乐节奏特征的统觉运动显著性特征包括相邻两视频帧的光流在不同根据预设的视频与音乐间的节奏关系，将输入视频的视觉节奏特征2.根据权利要求1所述的基于音视频节奏关系的视频背景音乐自动生成方法，其特征3.根据权利要求1所述的基于音视频节奏关系的视频背景音乐自动生成方法，其特征4.根据权利要求1所述的基于音视频节奏关系的视频背景音乐自动生成方法，其特征建立所述视觉运动速度特征与所述音符组密度关联建立所述视觉运动显著性特征与所述音符组强度关联建立输入视频帧数与音乐小节和节拍的转换5.根据权利要求1所述的基于音视频节奏关系的视频背景音乐自动生成方法，其特征将嵌入向量联接组合起来，再经过线性变换后，就得到最终的词向量，即6.根据权利要求1所述的基于音视频节奏关系的视频背景音乐自动生成方法，其特征3视频背景音乐生成：将从输入视频中提取的视频节奏特征，根据视频节4视频背景音乐自动生成方法是本领域技术人员亟需[0004]有鉴于此，本发明提供了一种基于音视频节奏关系的视频背景音乐自动生成方显著性特征包括相邻两视频帧的光流在不同[0013]所述视频与音乐数据库中视频节奏特征和音乐节奏特征的的统计信息还包括视5[0019]将音乐小节的音符属性和节奏属性转换为嵌入向量，pk＝Embeddingk(wk),k=[0031]图1为本发明实施例提供的一种基于音视频节奏关系的视频背景音乐自动生成方[0032]图2为本发明实施例提供的一种基于音视频节奏关系的视频背景音乐自动生成方6[0034]参见图1，本实施例公开的一种基于音视频节奏关系的视频背景音乐自动生成方[0035]可控音乐生成模块为存储有本实施例方法的计算机程序指令的非易失性计算机视频节奏特征与音乐节奏特征之间的节奏关系，所述视频节奏特征包括视觉运动速度特7[0053]将音乐小节的音符属性和节奏属性转换为嵌入向量，pk＝Embeddingk(wk),k=音乐小节内每一份词向量使用相同的位置编码，不同的音乐小节使用不同的节拍位置编码。模型在训练时学习到位置与音乐的关联，在生成时实现音乐的开始/结束与视频的开前视觉运动速度是100的视频帧对应于音符组8[0061]以上对本发明所提供的基于音视频节奏关系的视频背景音乐自动生成方法进行[0062]

人人文库> 全部分类> 行业资料 > 信息产业

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论