体育视频的内容标注和解析技术研究

体育视频的内标注和析技术研究,,育,技术频,一,数泛诸,数字电,数,远程教育等等.面对大量涌现的视频据,如题.正如,.,十分费时费力.尤其是当视频资源的,完全采用人工的方法都会遇到难.为了解决这一问题,索解引以索,.,Engine[6],Informedia[7],.多媒)的诞:

/听觉,即难以建立底层特征与高层语义的联.一般认,.题,如新闻,电影等在这些特定领域,结合相应的领域知识的,即体育比赛的,.体育比赛一般很漫长,.,人们容.,体育视频具有自己的特点,件,如跳水比赛中运动员的跳水足球比.这需要.其次如跳水比赛由,每轮又由若干选手组成等,.本课题的术平完,通,但是本课题的研究将证明部分的解,此.义用word格式/A4印/下载后可修改

2

:,.,我们已申请到国家体育总.,库.布适用于新上..基,可.:适用于无线服务提供商为个人务Service,简称可以为冗长力息二,属于视频检索领域的一个子课题.与新闻视频领域取的相比体育.这主要,,,而.,对也还统word格式/A4印/下载后可修改

3

.,,.为了,需要进行镜头边界.镜头:突.,镜;,从,常入解等.淡,.溶,后强,叠.掉..由于这个原,渐.早期的工作主要在突,近析.:.中对各.与非,基,运动矢量(析,从今天大量式如MPEG)存储的值word格式/A4印/下载后可修改

4

,是指,.当前,国内,作.[他们,通,摄,足球和运动对视频内容,包置射门,.例如如果场景接近球门区域而且足球有一个向球门的运,门实验,系,达到系难的PengXu:(如因为球在界外或裁判暂定比赛).他们开发了一个能够[19]..首,根据颜色分析得出每一帧中的草地颜色比,使用:(globe(在,算.,,则(行,特写一般是比赛中断)判断比赛是在进行还实验断检到86.5%,最坏只有67.3%.word格式/A4印/下载后可修改

5

Ming等也以足球为例提出了一[21].他们的系统根据关键帧中场地颜色的比率和物体的大小,.此外,他们观察到在射门,,从来检测足球比赛中的这些事件.实验结果89.3%,为等人MPEG压缩域的征[22].算,然后对每个帧统计其,考虑特写镜头比(wide-angle)镜头一般变,将视头对于,进动,来标容断,快,可能的投篮等.Y.Rui等,[23].,然,实验表明他们的算法率.球Zhang[(投手被罚出局)识别word格式/A4印/下载后可修改

6

度.,,这,以,就可引针对,试图提出一个一他认为事件的检测可以分为两步进.,和基于对象层次的验证阶段.征,如,.第二步在候选场景中进行对象分割根据总结的领域如对于网球图像中域,象:场地,运场地镜头表现等.,运动员作为,而背景则变得模.在,个的,而观众.,图形分割,,育,技术频,分析等,别行[33].文信息来幕(Closedword格式/A4印/下载后可修改

7

首先通过搜寻文本中事件相关的关键,.然后,再,计算度头特别是.,,为了,除了语义标注,还需要对镜头进行有.结构解析构.[34][35],一法.他们用起或高层场,进(如/镜头/)并不适合针析构如1示),识图跳水比赛查,论应.领域知识包括比赛相关和.,如足word格式/A4印/下载后可修改

8

,篮.主要来自对,,有综合识选择础.除了视,综合,.这也.在体育视声,只时要大,,在的.直接基于压缩域的分,不,可以显著提高处理速度量,,或础基早期法但是,体育视频中的事件段,.这.与,力因而.忽体育比word格式/A4印/下载后可修改

9

,它.析的缺.尽管许多文章中提到了体,但,[20]中,[31].体育,如图所示,通.上需要知,这方有没.[31]中架,,析.根据体育视频的自身特点和应用需要,,的三标内容.我们主要选跳水,是我国的奥运优势项目,深.跳水比赛具有,如层次化的结构,最终我们将实现一个统,的,其,word格式/A4印/下载后可修改

10

.,已了.方.通常自然,包括,词性标注,句法分析等几个阶段与之类似,元,并2架.图体育视频,镜头检测按照镜头为基本单位.镜头检测是视频内容,很大程度上影响了整个系.但是求(1)点测在算法应判(3)础性在此基,语.我们采用基于统计的方法来识别语.识别,首,别.以决word格式/A4印/下载后可修改

11

(1)件;(2)度(3)型别(4).,结构解析的任务是通过对视频,.目前为解决,,根据点,使则,析.在结构解析中引入文法描述,实现了领域.,只需要引入相应的文法描述赛括(1);实,力(3)频要求结构解析的效高四法,特别果如3所示.这变通,识word格式/A4印/下载后可修改

12

,而对于渐变的研究不多.系,,研究一法图体育视频(1):重慢动作方式重同一场景但.直是很难的尤其放,入,再束如3.因测事实测题我们将主要研究这法(2),,电,,作;,况,..首先,通过视频文本的检测就可以初步确定状态事件的,我word格式/A4印/下载后可修改

13

,识别状态事件的类别,运动员入场的字幕显示中有关键字"Round"(轮),"Rank"(排))总,通字,件(3),往往,.足,.,我[支通过,实现.但,不.,隐,但是并不能保证训练好的模型能够.,将,通机果,,育,技术频,的结构解析,.乔姆把文4种型,即0法法,1型文法或称法),2word格式/A4印/下载后可修改

14

法法和3法法.多弱,;上下文无关,句法模式识,编,,力.分别,选手比赛开始,头非终元,分.对于语义标注序列"前面为,,,弹出.,性.所以错误.如;如,则可面语义.,word格式/A4印/下载后可修改

15

,甚至一般视频的处理中,尽,完全自动的,通用的视频内容理,但,战给人们带来更加丰富和方便的体验.五六源4.96G据总约时20分钟5.33G据总约时;2.58G据包球等::具word格式/A4印/下载后可修改

16

:析,李锦涛,张勇东,"跳水比赛视频中精彩取",,中.,张勇东,李锦涛,"在体育比赛视频中检法,(明专利号02156973.8,已受.七–基–压–体–跳–技进,八ofB.andA."Applicationsof9,4,word格式/A4印/下载后可修改

17

,潘吴飞,网索,社年.D.S.D.andtoA.Hampapur,A.Gupta,B.Horo