CN117130483B 基于多模态融合的情感触觉调控系统及方法 （东南大学）_第1页
CN117130483B 基于多模态融合的情感触觉调控系统及方法 （东南大学）_第2页
CN117130483B 基于多模态融合的情感触觉调控系统及方法 （东南大学）_第3页
CN117130483B 基于多模态融合的情感触觉调控系统及方法 （东南大学）_第4页
CN117130483B 基于多模态融合的情感触觉调控系统及方法 （东南大学）_第5页
已阅读5页，还剩17页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

基于多模态融合的情感触觉调控系统及方法本发明公开了基于多模态融合的情感触觉识别模块。该系统通过采集用户的多种生理信2模块与所述多感觉信号采集模块实时采集用户的多种生理信号、音频信号和触觉振动信所述触觉最优参数调节模块作为所述基于多模态融合的情感触觉调控化模型计算出的四个最优参数实现另一触觉表达，该触觉表达与背景触觉振动协同作用，3脑电信号由脑电信号采集模块采集，所述脑电信号采集模块由64导联actiCAP电极帽和信号采集模块为Biosemi公司的ActiveT8.根据权利要求1所述的基于多模态融合的情感触觉调控系统产生的调控方法，其特触觉刺激包括持续存在的随音频自适应变化的背景振动，以及由触极帽和BrainProductsGmbH系列脑电采集放大器组成的脑电信号采集模块采集；心电信号通过ActiveTwo系列高导联心电采集系统构成的心电信号采集模块采集，音频信号由听4触觉最优参数调节模块接受到用户当前的情感状态，根据与目标16段电影片段播放结束即整个实验结束后，分析用户不同情感状态对应的振动参数，56[0011]所述触觉最优参数调节模块作为所述基于多模态融合的情感触觉调控系统的核实时采集所述视听觉发生模块中的音频信号和所述触觉发生[0023]所述多模态融合情感识别模块能够根据用户的多生理信号和诱发材料的多感觉7[0026]2、本发明中的触觉最优参数调节模块通过分析实时情感状态与目标情感之间的[0027]3、本发明中的基于多模态融合的情感触觉调控系统能够建立用户的情感触觉数[0040]本实例描述了一种基于多模态融合的情感触觉调控系统，其整体原理图如图1所据用户当前情感与目标情感的差异自动求解最优的触觉参数，发送至所述触觉发生模块28块1作为所述基于多模态融合的情感触觉调控系统的核心，根据用户当前的情感状态与目[0042]所述触觉参数优化模型7综合脑电信号、情感状态以及振动消耗功率等要素建立终存在随音频自适应变化的背景触觉振动，同时可基于所述触觉最优参数调节模块1计算[0050]所述视听觉发生模块3为用户提供视觉和听觉刺激，包括不同情感类型的电影片9信号采集模块9采集，所述脑电信号采集模块9由64导联actiCAP电极帽和BrainProducts为Biosemi公司的ActiveTwo系所述视听觉发生模块3中的音频信号，所述触觉信号采集模块12能够实时采集所述触觉发别模块6能够根据用户的多生理信号和诱发材料的多感觉信号，分析处理和识别用户当前述多模态融合情感识别模块6的优越性在于考虑到生理信号特别是脑电信号存在不稳定情感，每种情感对应4段电影片段。触觉刺激包括持续存在的随音频自适应变化的背景振脑电采集放大器组成的脑电采集模块采集。心电信号通过ActiveTwo系列高导联心电采集[0060]步骤S5:触觉振动参数求解并更新。触觉最优参数调节模块接受到用户当前的情

人人文库> 全部分类> 行业资料 > 信息产业

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论