版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
AI·VIDEOGENERATIONSORA人工智能文生视频大模型创新丨愿景丨未来汇报人:
时间:20XX.XX目录1Sora简介定义Sora是什么及其核心价值2行业背景理解Sora诞生的技术土壤与行业态势3名字由来揭示Sora名称的文化内涵与象征意义4发展历程从DALL-E到Sora的技术演进路线5功能特色全面展示Sora的核心能力与技术特点CHAPTER01Sora简介美国OpenAI发布的文生视频大模型,定位为“世界模拟器”Sora是什么?它为何被称为“世界模拟器”?Sora是什么?它为何被称为"世界模拟器"?Sora:文生视频大模型OpenAI发布的文生视频大模型,定位为"世界模拟器"发布方美国人工智能研究公司
OpenAI发布时间2024年2月15日(美国当地时间)命名渊源日文
"空"(そらsora),天空之意,象征无限创造潜力1技术根基与核心能力继承
DALL-E3
画质与指令遵循能力,在文本到图像技术根基上实现视频生成突破生成能力最长
60秒
逼真视频生成,根据文本提示直接创建动态影像场景模拟深度模拟真实物理世界,支持
多个角色
与特定运动的
复杂场景能力飞跃标志着AI理解并互动真实世界场景的能力实现
飞跃1123CHAPTER02行业背景视觉算法突破预示技术拐点,多模态应用持续涌现Sora诞生于怎样的技术浪潮之中?视觉算法突破引领新浪潮视觉算法四维突破:泛化性、可提示性、生成质量、稳定性算法成熟扩散算法推动3D与视频生成数据与算法难点仍多于图像LLM加速LLM加速AI各领域开源模型涌现,2024年有望更大发展应用涌现Pika、HeyGen等受关注验证多模态技术持续进步风险警示工具被用于欺骗民众民主倡导者与AI研究者警示2CHAPTER03名字由来日语“天空”之意,象征无限的创造潜力Sora这个名字背后蕴含着什么深意?天空之意,自由之魂"天空"(そら)Sora的日语词源本义"自由"超越边界的引申内涵无限的创造潜力技术愿景的象征表达3CHAPTER04发展历程从DALL-E到Sora,OpenAI多模态技术的持续演进Sora是如何一步步走到今天的?早期模型奠定技术基石100万上线仅
5天
用户突破从图像生成到语言理解,OpenAI逐步构建多模态技术底座2021年1月5日DALL-E发布可根据简单描述创建逼真清晰的图像,精通各种艺术风格2022年4月DALL-E2发布生成更真实准确的画像,综合文本描述中的概念、属性和风格等元素2022年11月30日ChatGPT发布不仅能对话,还能编写代码、创作内容4123GPT-4到Sora的跨越式突破2023年3月15日GPT-4面世高级推理超越前代,多模态生成与编辑创意内容2023年9月21日DALL-E3发布精准呈现用户想法,ChatGPT协同提供提示词2024年2月16日Sora问世继承画质与指令遵循,文本生成逼真视频,深度模拟物理世界4456正式发布即震撼行业数据来源:OpenAISora技术报告48个文生视频案例
同步公开60秒连贯视频生成
碾压行业Sora与行业平均视频生成长度对比4CHAPTER05功能特色最长60秒逼真视频,深度模拟真实物理世界Sora到底能做什么?它的技术底气从何而来?功能全景:一镜到底的60秒呈现具有多个角色、特定动作及主题背景准确细节的复杂场景最长一分钟,准确反映用户提示,可一镜到底的视频静态图生成视频根据静态图像生成视频,让图像内容动起来并关注细节,在动画制作、广告设计等领域具有应用前景视频连接连接两个输入视频,在完全不同主题和场景间实现无缝过渡视频扩展与缺失帧填充获取现有视频并扩展或填充缺失帧,在视频编辑、电影特效等领域帮助快速完成内容补充完善5三大核心生成能力图像生成可生成各种尺寸的图像,分辨率最高达
2048×20483D一致可生成动态运动视频,随相机移动和旋转,人和场景元素在三维空间中
一致移动远距离连贯性与物体持久性有效建模短期和长期依赖关系,包括人、动物和物体的持久化,即使被遮挡或离开框架;能在单个样本中生成同一角色
多个镜头,保持外观一致5123交互与模拟能力互动性Sora可用简单方式模拟影响世界状态的动作,如画家在画布上留下持续存在的新笔触,或人吃汉堡留下咬痕模拟数字世界可模拟人工过程如电子游戏,通过基本策略控制玩家,同时高保真渲染世界及其动态多机位可生成多机位、多角度的视频5多帧预测:从噪声到清晰扩散模型从噪声中生成完整视频静态噪音视频初始状态为随机像素逐步去噪多个步骤消除噪声干扰清晰场景随机像素转化为完整图像多帧一致主体暂时离开视野仍保持连贯51234Transformer架构的革新应用Sora采用Transformer架构替代传统U-Net结构,实现视频生成模型的架构级突破可扩展性长序列处理架构替换以Transformer取代U-Net打破Diffusion模型的结构惯性可扩展性跃升深度与宽度双向扩展,为长视频输出奠定技术基础能力跃升与优化长序列处理自注意力机制捕捉数据依赖关系,强化生成连贯性SSM优化以状态空间模型替代传统注意力机制,降低算力门槛,支撑高分辨率图像生成5数据处理的精巧设计Sora通过两大精巧设计,让模型精准理解并忠实执行用户意图重述提示词DALL-E3技术为视觉训练数据生成高度描述性标注忠实遵循指令使模型更忠实遵循用户文本指令灵活可控显著提升生成灵活性与可控性Patch数据表示统一Patch表示将视频和图像统一表示为Patch(类GPT中的token)跨维度训练支持不同持续时间、分辨率、纵横比的视觉数据训练丰富特征学习学习更丰富的视觉特征,扩展模型通用能力5原生规模训练的独特优势Sora采用"原生规模训练",突破传统裁剪限制,实现更高质量的多样化视频生成传统方法局限标准尺寸裁剪过往生成通常将视频调整为固定大小,失去原始长宽比与细节方形裁剪弊端裁剪为正方形的模型导致画面不完整、构图缺陷原生规模训练优势灵活采样支持各种尺寸和纵横比的视频生成跨设备适配直接为不同屏幕设备创建内容快速原型低分辨率内容快速验证创意完整美观相比方形裁剪,画面更完整更自然5客观看待Sora的局限性三大技术短板难以准确模拟复杂场景的物理原理,无法理解因果关系混淆提示的空间细节,难以精确描述随时间推
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 家庭照护员安全规程竞赛考核试卷含答案
- 制球工操作安全能力考核试卷含答案
- 水运工程施工工岗中优化考核试卷含答案
- 废胶再生工风险评估与管理知识考核试卷含答案
- 种畜胚胎移植工岗位绩效评估考核试卷含答案
- 工程测量-专题知识讲座
- 中国磷酸一铵行业市场发展前景研究报告-智研咨询发布
- HDPE管施工方案参考
- 全国计算机等级考试二级c语言历年笔试真题及答案资源
- 厂房钢结构施工方案
- UL2034标准中文版-2017一氧化碳报警器UL中文版标准
- CAD教程-AutoCAD2024全套教程
- DB52T 888-2014 毛竹(楠竹)低产林改造技术规程
- AIGC提示词美学定义
- 高中新生入学开学第一课班会课件
- 铁路车站岗位职责样本
- 《高二开学第一课》主题班会课件
- 巨型南瓜栽培技术
- 自考《兽医法规14239》考试复习题库(必备版)
- 《中华民族大团结》(初中)第1课-爱我中华教学课件
- 化学(基础模块)中职PPT完整全套教学课件
评论
0/150
提交评论