版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
基于风格特征变化信息对原始风格特征集合中修改描述信对应的语义编码信息调整原始风格2将所述图像修改描述信息输入到语义编码模型中,以基于所述语获取所述语义编码信息所对应的风格特征变化信息,所述风基于所述风格特征变化信息对所述原始风格特征集基于所述目标风格特征集合生成所述图像修改描述信息对基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进行调将第二原始风格特征以及所述调整后的第一风格特征进行组合获取预先确定的图像变化特征空间和文本语义特征空间之间的将所述语义编码信息作为所述文本语义特征空间中的文本语义特征获取训练样本,所述训练样本包括第一训练图像和所述第一训练图像配对的训练文将所述训练文本输入到待训练的语义编码模型中进行编码,得将所述第一训练图像输入到图像编码模型进行编码,得到所述第一训练根据所述第一训练图像的图像编码特征和所述训练文本的文本编码应的编码特征与文本模态对应的编码特征之间的3根据所述目标损失值调整所述待训练的语义编码模型的模型参根据所述第一相似度,得到所述待训练的语义编码模型对应的第一根据第二相似度,得到所述待训练的语义编码模型对应的第二损基于所述第一损失值与所述第二损失值,得到所述待训练的获取第二训练图像,将所述第二训练图像输入到待训练的风所述待训练的风格特征识别模型获取所述第二训练图像对应的预测风格根据所述预测图像和所述第二训练图像的差异,得到所述待训练的根据所述第三损失值调整所述待训练的风格特征识别模获取待处理的视频,并确定所述视频中的目标视频帧,作为所在所述基于所述目标风格特征集合生成所述图像修改描述信息对应的风格变换图像基于所述风格变换图像和所述视频中的其他视频帧,得到目标视描述信息获取单元,被配置为执行接收待进行风格变换的原始图像语义编码单元,被配置为执行将所述图像修改描述信息输入到语义编行训练得到;风格变换确定单元,被配置为执行获取所述语义编码信息所对应的风格特征变化信原始特征集合获取单元,被配置为执行由风格特征识别模型4由所述待训练的风格特征识别模型对所述第二训练图像提取得风格变换图像获取单元,被配置为执行基于所述目标风格特征集合生成基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进行调将第二原始风格特征以及所述调整后的第一风格特征进行组合获取预先确定的图像变化特征空间和文本语义特征空间之间的将所述语义编码信息作为所述文本语义特征空间中的文本语义特征第一训练图像获取单元,被配置为执行获取训练样本,所述训练文本编码单元,被配置为执行将所述训练文本输第一训练图像编码单元,被配置为执行将所述第一训练图第一相似度获取单元,被配置为执行根据所述第一训练图像第一参数调整单元,被配置为执行根据所述目标损失值调整所根据所述第一相似度,得到所述待训练的语义编码模型对应的第一损失值,所述5根据第二相似度,得到所述待训练的语义编码模型对应的第二损基于所述第一损失值与所述第二损失值,得到所述待训练的第二训练图像获取单元,被配置为执行获取第二训练图像第三损失值获取单元,被配置为执行根据所述预测图像和所述第二训练图像的差异,第二参数调整单元,被配置为执行根据所述第三损失值调视频更新单元,被配置为执行基于所述风格变换图像和其中,所述处理器被配置为执行所述指令,以实现如权利要求6[0011]基于所述风格特征变化信息对所述原始风格特征集合中的原始风格特征进行调[0014]基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进[0016]在一示例性实施例中,所述获取所述语义编码信息所对7射关系获取所述文本语义特征在所述图像变化特征空间所对应态对应的编码特征与文本模态对应的编码特征之间的通过所述待训练的风格特征识别模型获取所述第二训练图像对应的预测风8[0041]在所述基于所述目标风格特征集合生成所述图像修改描述信息对应的风格变换[0051]基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进射关系获取所述文本语义特征在所述图像变化特征空间所对应9[0079]视频更新单元,被配置为执行基于所述风格变换图像和所述视频中的其他视频过文字输入或语音输入的方式,向终端110发送对应的带有修改意图的图像修改指令。例本内容的差异可以与图像风格的变换情况存[0130]基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进风格特征为原始风格特征集合中第一原始风格特征之外的原始格特征进行调整,并保持与风格特征变化信息不相关的第二原始风格特征不变的情况下,[0144]在一示例性实施例中,文本语义特征空间可以是语义编图像模态信息的修改中,为后续基于语义编码信息确定对应的风格特征变化信息提供基[0159]在得到训练文本后,可以将训练文本输入到待训练的语图像编码特征和文本编码特征,确定每一第一训练图像和每一训练文本之间的第一相似[0168]在步骤S360中,根据所述目标损失值调整所述待训练的语义编码模型的模型参[0170]在本公开中,可以根据第一训练图像的图像编码特征和训练文本的文本编码特将文本模态的信息融入到图像模态的信息中,为后续对图像修改描述信息进行语义编码,长度过长、过短(如文本的字符数大于或小于预设的阈值)或者包含特殊字符(如包含预设度对应的第一损失值和第二相似度对应的第二损失值确定练的图像编码模型输出第一训练图像对应的图像编码特征,进而基于对应的目标损失值,的文本模态和图像模态对齐的语义编码模型和图像[0193]在实际应用中,图像生成模型可以是生成式对抗网络(GAN,Generative可以将扩充后的图片数据和图片数据集作为训练生成式对抗网络[0194]在获取到训练图像后,可以预先定义一个生成器(generator)和一个判别器[0204]在所述基于所述目标风格特征集合生成所述图像修改描述信息对应的风格变换[0213]应该理解的是,虽然图2和图3的流程图中的各个步骤按[0214]可以理解的是,本说明书中上述方法的各个实施例之间相同/相似的部分可互相[0216]描述信息获取单元601,被配置为执行接收待进行风格变换的原始图像对应的图[0218]风格变换确定单元603,被配置为执行获取所述语义编码信息所对应的风格特征[0219]原始特征集合获取单元604,被配置为执行获取所述原始图像对应的原始风格特[0220]目标特征集合获取单元605,被配置为执行基于所述风格特征变化信息对所述原[0221]风格变换图像获取单元606,被配置为执行基于所述目标风格特征集合生成所述[0223]基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进射关系获取所述文本语义特征在所述图像变化特征空间所对应[0251]视频更新单元,被配置为执行基于所述风格变换图像和所述视频中的其他视频[0253]图7是根据一示例性实施例示出的一种用于执行图像处理方法的电子设备700的方便多媒体组件708和处理组件702之间的[0257]电源组件706为电子设备700的各种组件提供电力。电源组件706可以包括电源管后置摄像头可以是固定的光学透镜系统或具有焦距和光学变[0259]音频组件710被配置为输出和/或输入音频信号。例如,音频组件710包括麦克风配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器704或经由通信[0260]I/O接口712为处理组件702和外围接口模块之间提供接口,上述外围接口模块可如所述组件为电子设备700的显示器和小键盘,传感器组件714还可以检测电子设备700或[0262]通信组件716被配置为便于电子设备700和其他设备之间有线或无线方式的通[0266]图8是根据一示例性实施例示出的一种用于执行图像处理方法的电子设备800的包括一个或多个处理器,以及由存储器822所代表的存储器资源,用于存储可由处理组件子设备800可以操作基于存储在存储器822的操作系统,例如WindowsServer,MacOSX,是计算机可读存储介质,例如,所述计算机可读存储介质可以是ROM、随机存取存储器
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 小学五年级EV3机器人编程课程探索车二代教学设计
- 高二英语选择性必修一 Unit 1 Welcome to the unit 教学设计
- 浙教版七年级科学“生物体的基本单位(三)”教学设计
- 高三化学电化学章末综合测评复习教学设计
- 高中地理必修一《4.1 常见地貌类型》教学设计
- 初中八年级生物教学设计 生物与细胞专题复习
- 高中语文必修上册《声声慢》寻寻觅觅情境化教学设计
- 初中语文中考一轮复习记叙文阅读教学设计
- 小学四年级道德与法治教学设计:防灾减灾日主题班会-生命至上科学避险
- 初中九年级科学《认识能源》习题课教学设计
- 高甘油三酯血症管理专家共识(2025版)
- 体育场馆安全生产管理台账
- 2026年(完整版)院前急救知识培训题(含答案)
- 2026年行测类题库及答案详解
- 东航校招的在线测评题目2026
- 混凝土路面拆除及恢复施工方案
- 2026及未来5年中国航空飞行培训行业市场全景调研及前景战略研判报告
- 2025河南洛阳国裕集团招聘6人笔试参考题库附带答案详解(3卷合一版)
- 中医治疗慢性疲劳综合症中药治疗
- 梅毒防治知识培训
- 西门子热水器DG60368STI使用说明书
评论
0/150
提交评论