定义产业的公开嵌入式媒体平台

定义产业的公开嵌入式媒体平台NeilTrevett

NVIDIA嵌入式内容副总裁

KhronosGroup总裁

OpenGLES工作组主席Welcome!2:00NeilTrevettVPofEmbeddedContentatNVIDIAPresidentofKhronosKhronosIntroductionCreatingaMobileContentPlatformKhronosNewsEnglish2:30DeanFuProductManager,SMediaAnnouncingGlamo3365–OpenGLES-basedgraphicsacceleratorchipformobile3DgamingChinese2:50JohnLeeDirector,APAC,FathammerLtdLivedemosofLGE,Samsung,SKT,PantechandCuritelphoneswith3DaccelerationrunningonOpenGLES1.0English3:10NobuyukuSeguchiFAEManager,SonapticJapanOpenSLESandalookatdifferencesbetweenmobile3DaudioandmobilestereowideningtechnologiesEnglish3.30HwanyongLeeDirectorofSalesandMarketing,MTISOpenVG–2DvectorgraphicsforadvancedmobilegraphicsChinese3:50SteveTian–HybridGraphics3:55

Questions&Answers4:00-5:00Tea&Demos100Ms/年手机–集中装置结合通信，图像，视频和游戏的手机。顾客会找寻具有强吸引力特点的新手机网络操作者需要增加网络基础设施的ARPU和利用手机生厂商需要增加替换销售多媒体手机–在2008年会从原2004年整个手机市场的5%占到47%来源-JonPeddie&Associates前所未有的巨大媒体硬件和软件市场80年代

工作站100Ks/年90年代

PC10Ms/年00年代

手机手机媒体快速成长2D3D软件有HW加速的3D蜘蛛侠23D:纽约地铁Sony图片蜘蛛侠2动作

蜘蛛侠2:英雄归来的Sony图片手机快速获得成熟的媒体功能以硬件为基础的3D和视频手机预期在2006年展开攻势。手机媒体硬件加速将会无所不在–如同在PC一样艺术级的媒体API标准对于在手机平台上的高效电池图像和媒体硬件需要释放其可视的潜在性。媒体API使市场成长

一个API就是在硬件和软件世界的合约使得双方都能获益ISV见证在多重平台上减少可变性更多软件能在一个较好水平的功能和质量下更快得到达市场。硬件卖主可以加速许多应用程序添加值到他们的平台软件开发者硬件提供者硬件提供者硬件提供者硬件提供者硬件提供者软件开发者软件开发者软件开发者软件开发者一个产业标准的媒体API使得任何软件在任何一致的硬件上能够运行。API使得手机加速能效在高质量上有更快的性能硬件传递至少是软件性能的10倍-甚至是在拥有低成本系统的低端CPU上

较少能量硬件加速器发掘在一个媒体管道中有平行性为了在软件中给出一个x10能效艺术用户界面状态小的屏幕需要在每个象素中拥有更多高级图像处理

创建OpenAPI标准Open成员

任何公司可以通过支付成员应付款加入Open标准

完全免费，公开使用跨平台

支持不同的手机和嵌入式市场创建产业动力

说明，一直性测试，促进和教育Khronos对于及时地创建高质量，完全免费公开的标准享有全球认证的荣誉OpenStandardAPIsforEmbeddedRichMediaAcceleration

超过95家公司创建mediaauthoring和acceleration标准Khronos是如何赚钱的?它不盈利!Khronos是一个纯无盈利性组织成员费和期货保证金赞助我们的成员通过使用我们提供的标准卖出产品来赚钱从来不试着针对标准其本身而进行收费$$出售一个API会产生一笔相对小的收入一个公开完全免费的API标准能创建更大的市场机会我们的成员也创建标准，并且与市场上使用Khronos标准的产品进行竞争。Khronos嵌入式媒体平台Khronos加速API使用最低可能水平的提取，在没有强制的政策下提供应用程序和siliconportability2D/3D图像2D适量图像音频视频，音频和图像媒体框架EGL应用程序或中间设备库(JSR184引擎,Flashplayers,mediaplayers等等)KhronosAPI家族提供了一个完全免费，跨平台的媒体加速平台。MediaSilicon–CPUs,DSP,硬件加速器等等.抽象通道到OS资源加速的矢量图图像针对矢量图像像的强大需求求基于矢量图象象的Bezier曲线是高质量量2D的基础不易多边形为为基础–以缩放和定位位为基础的路路径更容易的导入入到不同的屏屏幕尺寸许多应用程序序使用高质量量的2D矢量图像面板板便携式mapping和GPS应用,E-book阅读器和文本本打包高级用户界面面和屏保,2D游戏许多矢量图像像格式早就开开始使用Flash,SVG,PDF,Postscript,Vectorfonts等等但是所有的2D矢量图像都不不是加速的在在运行!在低能量的手手机CPU上没有效果OpenVG–加速的矢量图图像!针对2D矢量图像的低低水平API集中于使硬件件加速应该也允许有有效率的SW执行OpenVG加速现存格式式对于Flash,SVG等不是一个竞竞争者在可能的地方方使用OpenGL-stylesyntax使OpenGL开发者学习OpenVG尽可能的简单单OpenVG1.0在Siggraph2005上公布完全开放免费费的标准仅在12个月月内开发出2Q043Q044Q041Q052Q051stOpenVG面对面会议OpenVG1.0草拟说明书完完成OpenVG工作小组开始始应用程序2D硬件加速SVG/Flash/FontPackage等3Q05样本也一致性性测试4Q05OpenVG1.0说明书正式公公布媒体库可携性性DiversityofsiliconprocessorsDiversityofoperatingsystems完整的媒体库库可携性媒体引擎CPUs,DSP,硬件加速器等DL–““DevelopmentLevel”MediaPrimitives–对siliconacceleration提供可携性MPEG4H.264MP3AMROpenMAXIL通过操作系统统的可携性媒体库进入OS媒体框架的抽抽象界面OpenMAXDL通过处理器的的可携性热区面板使得得通过硬件体体系更加容易易导入更多媒体库IL–““IntegrationLevel”MediaPrimitives–对不同的操作作系统提供可可携性应用程序操作系统媒体体框架更多视频解解码，图像和和声音库等OpenMAX会在2005年年底左右右正式发布加速的嵌入式式音频嵌入式音频危危机现在许多拥有有不同功能的的封闭独占的的音频API甚至播放一个个简单的声音音在不同的平平台上也会不不同没有标准可到到达可用的硬硬件开发者的许多多工作是针对对不同的平台台重新写代码码新型多媒体装装置配合高级级音频功能情况更加糟糕糕!需要一个标准准,本土低水平的的硬件API!OpenSLES需求一个统一的本本地音频加速速API电池能耗的掌掌上装置:手机,智能能手机,游戏手机,PDA应用程序为导导向的“开发者”API标准化通道到到高级音频功功能:3Dpositional音频,reverb,SP-MIDI各种高水平音音频API的跨平台基础础包括:Java多媒体API(JSR-135);高级多媒体补补充(JSR-234)能够使软件到到硬件平台成成为无接痕转转化轻松导入多重重目标目标应用程序序互动音频应用用程序(e.g.游戏)Ringtone重放录音装置和UI音效应用程序音频硬件高水平音频库库工作组里程碑碑强大的产业团团体加入我们!3Q062Q061Q064Q053Q05OpenSLES工作小组成立立外部评论草案案说明书公布OpenSLES1.0说明书第一次面对面面的会议产业标准嵌入入式3DOpenGLESAPI标准OpenGL的Small-footprint子集在OpenGLARB合作下创建针对3D游戏的强大,拥有完整功能能的低水平API在所有主要的的平台上都是是可行的完全免费!!去除多余部分分去除工作站功功能ARB回馈和拼准嵌入式中心工作站中心在一个小的的footprint中拥有强大的的功能软件引擎TheOpenGLES家族的标准OpenGLES1.XOpenGLES1.0,1.1和1.1ExtensionPack-针对软件演化化3D功能性且修改改功能硬件-所有1.X说明书与后面面的兼容OpenGLES2.XOpenGLES2.0-针对新一代的的可编程硬件件的3D功能性-配有GLSLESshading语言-所有2.X说明书与后面面的兼容OpenGLES-SCOpenGLES-SC1.0-针对安全性主主要应用程序序的3D功能性-军用,航用和自动应应用程序EGLEGL1.0,1.1and1.2-本地平台window系统界面-图像资源管理理的可携式图图-使得快速混合合模式的2D/3D渲染能使用OpenGLES和OpenVGOpenGLES––是手机3D的中心C/C++应用程序ScenegraphAPIsM3G(JSR184)中间设备库游戏引擎Java应用程序硬件OpenGLES引擎软件OpenGLES库操作系统低水平3D图像API高水平图像库库应用程序把先进的2D/3D图像带到各式式平台中去“就像金属一一般”API提供了可携性性和灵活性通过高提取库库使用JSR239定义官方JavaBindings到OpenGLESJ2ME通过应用程序序可直接使用用API必须在一种适适当的速度下下进化200420052006OpenGLES1.03D在CPU的软件上运行行OpenGLES1.1加强3D在固定功能的的硬件上运行行OpenGLES2.0

3Dshaders在可编程的硬硬件上运行足够快的用来来鼓励和公布布新的功能不要太快以至至于大家不能能普遍接受现在每隔12月便需要新新的API版本ShippingProductsOpenGLES1.1OpenGLOpenGL1.3OpenGL1.5OpenGL2.0OpenGLES图标–2个轨道说明公布200320042005OpenGLES2.XOpenGLES1.0GLSLOpenGLES1.1

ExtensionPackOpenGLES2.0临时说明加强新出现的的硬件功能，，以及M3G的无痕加速和和附加能量管管理加强了功能且且减少了可编编性而且会包包括在OpenGLES1.2去除多余部分分和工作站功功能->简单,流线型的API最小化固定功功能Shader程序使用GLSL.去除多余的固固定功能–>简单,流线型的API.支持远程编辑辑可编程的硬件件的图标轨道道固定功能硬件件的图标轨道道最小化1.X和2.X轨道间的区别别。在每个轨道上上都是全部向向后兼容的。。平台可进入其其中一个或者者全部的两个个库。流线型子集新功能性M3G(JSR-184)加速需求OpenGLES1.XOpenGLES2.0可编程管道APIVertexShader光栅Primitive集合FragmentShaderDepthStencilAlphaTestDitherColourBufferBlendVertexBuffer对象顶点三角/直线/点Primitive处理FrameBuffer贴图环境颜色FogFragmentshaders代替了固定定功能的贴贴图，颜色色和FogTransformandLightingVertexshaders代替了固定定功能的转转化和光照照GLSLES概述语言与桌面面OpenGLGLSL非常相近如同在OpenGL2.0中定义的一一样编辑可以在在装置之外外进行装载二进制制的界面大多数的内内置,固定功能状状态处理被被删除了很大的减少少了执行的的复杂性减少了对shader大小和复杂杂性的期望望一组例子和和一致性测测试将建立立基线对桌面GLSL的平行轨道道与ARB紧密联系在在一起工作作以确保集集中Shaders––下一代手机机3DDoom3’sZombiesFarCry’sWaterUnreal’sRocksHalo’’sIce3D的今天固定功能性性3D的明天-Shader可编程性建立图像API生态系统所有的都会会在“手机时代”发生授权予开发发者一致性测试试基准高质量的平平台OpenAPI标准对于掌上3D的市场需求求伟大的3D应用程序产业合作OpenGLES1.1一致性测试试在05年年8月发布布.第一个一致致性软件和和硬件早就就产生了OpenGLES2.0在05年8月发布–就是在OpenGLES1.0发布24个月之后OpenGLES由于其授权予ISV而获得了GameDeveloper荣誉Futuremark智能手机基基准–使用OpenGLES,Jbenchmark3D测量JSR184性能OpenGLES开发标准和和教育材料料超过95个产业领导导者是Khronos的成员第一个硬件加速OpenGLES手机在2004年夏出炉工具!工具!工具!我们需要做做尽可能简简单的3D标题来开发发MEDIA

AUTHORINGAuthoring和加速标准准的协作开开发MEDIA

ACCELERATION对于嵌入式式装置和平平台的Authoring要求工具和标准准来创建和和分布强制制内嵌式内内容Collada––工具和Playback配合数字资产交交流计划–使ISVs更具生产力力使3Dauthoring工具可以一一起工作来来提高工具具链的力量量内容传递的的打包格式式–包括shader和物理学COLLADAFX和COLLADA物理学COLLADA和OpenGLES2.0间的强大的的合作Collada通过使用OpenGLESShading语言使得shaders可以授权和和打包3dsmaxCollada使得领先的的3Dauthoring工具可以有有效的一起起工作以用用来创建OpenGLES应用程序和和资产资产–包括可以在在工具间交交流和为OpenGLES传递而打包包的shaders和物理学针对3D内容而无所所不在的加加速API和使用OpenGLES2.0的shadersTightlyIntegrated3DAuthoringandDeploymentStackCollada1.4将在2005年12月被批准准并且将会会包含shader和物理学metafile数据定义训练管道在小footprint中的3D加速媒体引擎–CPUs,DSP,硬件加速器器等媒体库视频解码,图像和音频频库等用户应用程程序媒体APIsE.g.OpenMAXIL,SymbianMDF,

GStreamer,OpenSLES2D矢量图像加加速图像APIs自动训练可可以帮助隐隐藏开发者者的平台的的多变性OpenMAXDL编码和媒体体库可携性性Authoring应用程序Collada在模型和运运引擎中是是重要的一一个桥梁。。Collada使资产和shaders现实中的传传递被用来来训练-包括特殊的的配合内容容到没有失失去主资产产数据的不不同平台的的能力KhronosNewsOpenGLES和SonyPlayStation3OpenGLES将可以用于于Playstation32005年年3月，Sony在旧金山的的GDC上公开宣告告所有在E3中的互动demos使用的是OpenGLES许多刚开始始针对PlayStation的ISVs代码后来导导入到其他他的平台中中去工具对于隐隐藏平台的的多变性是是很重要的的针对控制台台和手机的的强大可携携性前一代的控控制台游戏戏可以在数数百万台100s的手机上配配置应用程序可可携性可跨跨越各种平平台合作开放的的标准的力力量一个正在成成长的OpenGLES工具和平台台的基础设设施正在创创建世界上上最大的机机会给游戏戏开发者们们。SKT和KTF建立了游戏戏基地3D配置进化Java––硬件加速JSR184EnginesOpenGLES本地应用程程序Java-JSR184软件引擎最初开始的的使用以软软件JSR184为基础的引引擎名称越来越多的的JSR184引擎使用用OpenGLES来进行硬件件加速在Java平台上针对对JSR184名称的强大大的产业动动力需要为了有有本地应用用程序支持持的平台能能够对于更更高端的3D性能进入本本地OpenGLES应用程序200420052006Khronos应该做的更更多吗?OpenGLES2D/3DOpenVGVector2DOpenMaxVideoOpenSLESSoundKhronosMediaAPIs输入网络本地应用程程序Java应用程序OSOSAbstraction对于用户互互动的实时时游戏循环环和在本地地代码中的的多媒体播播放器网络络–这些APIs的附加到Khronos家族提供了了开放,跨平台相等等的DirectXAAA3Dtitles最好的性能能将会被需求求成为本地地应用程序序ThinJavaBindingThinJavaBinding针对平台可可携性和sandboxing的OS提取APIs––可以对资源源管理，灵灵活规定反反映出JSRsEGLNVIDIAdistributingHybrid’sMobileFrameworkv6forGoForce3DChipsJSR184JSR239SVGTinyJSR226CandJavaGraphicsApplicationsHybrid’sMobileFrameworkv6provideshigherlevellibrariesandJavabindingsfor3Dandvector2DgraphicsGoForce3DFamilyofWirelessGPUsNVIDIAsupplieshighlyoptimized,acceleratedKhronosstandardsdriversfor3Dand2DvectorgraphicsNVIDIAisnowaone-stopshopforahighly-optimized,verticallyintegratedfamilyofgraphicsAPIsforCandJavagaming3DMarkMobile06

TheOpenGLESBenchmark一个完整且且一致的媒媒体加速平平台一个媒体APIs家族设计成成一起工作作“基础水平”APIs与silicon相似–在在每个平平台上需要要基础功能能性fundamentalfunctionalityneededoneveryplatform由产业专家家设计在mediasilicon,平台和软件件的产业领领导者都是是Khronos的成员所有KhronosAPIs是可延伸的的使得快速和和无限制的的平台有区区别减少开发和和配置成本本全球产业的的接纳确保保了竞争性性的silicon和软件供应应链灵活活的的,快速速轨轨道道的的图图标标进进化化有效效的的和和流流线线型型的的过过程程–如果果需需要要说说明明文文件件每每隔隔12个个月月就就会会更更新新完全全免免费费Khronos致力力于于创创造造更更多多的的市市场场机机会会给给它它的的成成员员和和其其产产业业欢迎迎所所有有的的公公司司加加入入我我们们!每年年只只需需支支付付y$5,000会员员费费为什什么么要要使使用用Khronos的标标准准?有任任何何问问题题吗吗？？PleaseCometoChinaMobileTerminalIndustryDevelopmentForumSplendourHall2ndFloor3-4thNovember9、静夜四无邻邻，荒居旧业业贫。。12月-2212月-22Saturday,December31,202210、雨中中黄叶叶树，，灯下下白头头人。。。06:10:1206:10:1206:1012/31/20226:10:12AM11、以我我独沈沈久，，愧君君相见见频。。。12月月-2206:10:1806:10Dec-2231-Dec-2212、故人人江海海别，，几度度隔山山川。。。06:10:1806:10:1806:10Saturday,December31,202213、乍见翻翻疑梦，，相悲各各问年。。。12月-2212月-2206:10:1806:10:18December31,202214、他乡生白白发，旧国国见青山。。。31十二二月20226:10:18上上午06:10:1812月-2215、比不了得就就不比，得不不到的就不要要。。。十二月226:10上上午12月-2206:10December31,202216、行动出成果果，工作出财财富。。2022/12/316:10:1806:10:1831December202217、做前前，能能够环环视四四周；；做时时，你你只能能或者者最好好沿着着以脚脚为起起点的的射线线向前前。。。6:10:18上上午6:10上上午午06:10:1812月月-229、没有失失败，只只有暂时时停止成成功！。。12月-2212月-22Saturday,December31,202210、很多事事情努力力了未必必有结果果，但是是不努力力却什么么改变也也没有。。。06:10:1806:10:1806:1012/31/20226:10:18AM11、成成功功就就是是日日复复一一日日那那一一点点点点小小小小努努力力的的积积累累。。。。12月月-2206:10:1806:10Dec-2231-Dec-2212、世世间间成成事事，，不不求求其其绝绝对对圆圆满满，，留留一一份份不不足足，，可可得得无无限限完完美美。。。。06:10:1806:10:1806:10Saturday,December31,20221