（信号与信息处理专业论文）远程富媒体的呈现.pdf

摘要 摘要 在最近的几十年中，计算模型已经从集中式大型机计算模型转变为分布式 的桌面计算模型。但是，随着个人计算机广泛使用并且保有量越来越大时，用 于维护这些计算机的开销变得越来越难以控制。由于存在这样的问题并且变得 越来越难解决时，人们又开始趋向于集中和更易于管理的计算模型。远程访问 计算模型就是这种趋势的一个具体表现。 虽然远程访问计算模型类似于大型机时代的集中计算模型，但是如今的用 户已经不满足于只使用a s c i i 文本来表示输入与输出。远程访问系统必须有效 地支持富媒体环境来满足客户的需求。达到这样的目的的关键技术就是远程富 媒体呈现技术使得图形显示能够通过网络实时地传输并呈现在客户端并且支持 与用户的可交互功能。 随着处理器计算速度和图形芯片处理速度的快速发展，从早期简单的文本 处理软件到如今绚丽的3 d 游戏画面和丰富的多媒体应用，富媒体内容越来越 复杂，富媒体应用与人的交互也越来越丰富。丰富的富媒体内容与应用使得其 在计算资源受限或网络带宽受限条件下的实时低延时编码、传输与交互带来了 极大的挑战。而且在目前互联网上的异构网络环境下，远程富媒体呈现也面临 着不同网络所引起的传输带宽差异、传输延时差异和带宽的波动等所带来的问 题。并且，客户端设备也在计算能力、接入带宽和显示分辨率方面存在广泛的 异构性。设备的异构性也给富媒体呈现服务的广泛普及带来了挑战。 本文从富媒体的特点出发，针对远程富媒体呈现系统的性能要求，创新性 地提出了一个高性能的远程富媒体呈现系统，并且提出了若干技术来进一步提 高远程富媒体的呈现性能、减少带宽资源计算资源损耗、提高系统对异构网络 和设备的自适应性和提高用户的交互体验。本文具体的研究内容主要包括： 首先，我们提出了一个完整的端到端的可交互的富媒体呈现系统。该系统 能够支持高性能的远程屏幕呈现以及桌面的远程使用，即使是在具有极大显示 量的多媒体应用中。在该系统中，我们为远程显示提出了一个对压缩友好 ( c o m p r e s s i o nf r i e n d l y ) 的系统结构。在这个系统结构下，我们提出了一个有 效的屏幕图像编码方案。该编码方案自动地根据图像块的内容使用合适的编码 方法来压缩该块。同时，我们针对不同的终端设备提出了一个自适应的传输机 制来减小网络带宽的消耗量而又不牺牲用户体验；针对不同的网络环境，我们 提出动态地调整发送缓冲区的方法来取得网络吞吐量与数据延时之间的平衡。 我们还提出了一些交互机制和网络传输机制来提高系统的可交互体验。 第二，针对多客户端连接的屏幕共享系统，我们提出了一个有效的屏幕图 i 摘要 像编码方法。对多客户端连接时所需要的多码率码流编码时，我们提出了一个 一次化编码算法( o n e p a s se n c o d i n g ) 。一次化编码算法使得远程主机端编码生 成多个码率时只需要一次编码过程，使得主机端的编码复杂度极大的降低。特 别是当远程的计算资源受限时，一次化编码算法能够较大地提高屏幕共享系统 的性能。基于我们提出的屏幕图像编解码方案，我们还为基于以数据中，t l , 为基 础的大规模桌面网络会议提出了一个快速的屏幕图像转码方案。 第三，我们提出了使用g p u 来加速屏幕图像编码的算法，以加快远程主机 端的编码速度。在这个算法中，我们将屏幕图像编码端除熵编码以外的所有计 算模块都转移至g p u 中以有效的利用g p u 强大的并行计算能力。实验结果表 明，g p u 加速能够大幅度地提高远程主机端的编码速度。 第四，针对富媒体中的视频媒体类型，根据视频内容的特点，我们使用视 频转码来达到对视频内容的有效传输并且减少网络带宽的消耗。我们提出了一 个基于功率谱密度的率失真优化( r a t e d i s t o r t i o no p t i m i z a t i o n ，r d o ) 模型来加 速视频转码的过程。在这个模型中，运动补偿的预测误差不是由块内的s a d 或 者s s d 之和计算出来而是由输入输出运动矢量之差和预测信号的功率谱密度计 算猜测出来。该方法不仅能够应用于时域的视频转码，包括对码率、分辨率、 帧率的转码，而且还适用于在频域上的视频转码。本文中，我们以h 2 6 4 a v c 编码标准为例，将所提出的率失真模型用在对p 帧的时域转码和对b 帧的频域 转码。由于该模型省掉了运动估计中计算量最大的s a d s s d 计算，该率失真优 化模型能够大幅度地加速视频转码的过程。 第五，基于我们所提的远程富媒体呈现技术，我们构建了一个高性能的基 于p r o x y 的手机网页浏览器。该手机网页浏览器可以提供给用户在无线和移动 网络下高质量的网页显示和丰富的交互体验。我们的浏览器系统提供了一个完 整的端到端的方案，该方案把网页格式转换成位图和网页对象的组合来解决原 始网页对手机设备的不兼容性。为了提高用户的交互体验，我们为不同类型的 网页对象设计了不同的交互机制。对象级的交互设计能够很好地提高交互性能 同时能极大地减少不必要的带宽损耗。 关键词：富媒体，远程富媒体呈现，远程桌面，瘦客户机系统，可交互媒体系 统，屏幕图像编解码，视频转码，手机浏览器 a b s t r a c t a b s t r a c t i nt h er e c e n td e c a d e s ，t h ec o m p u t i n gm o d e lh a sb e e nm o v e df r o mt h ec e n t r a l i z e d m a i n f i a m ec o m p u t i n gm o d e lt ot h em o r ed i s t r i b u t e dd e s k t o pc o m p u t i n gm o d e l h o w e v e r , a st h ep e r s o n a ld e s k t o pc o m p u t e r sb e c o m eu b i q u i t o u sa n dt h ea m o u n to f t h ep e r s o n a lc o m p u t e r sb e c o m e sl a r g e ra n dl a r g e r , t h et o t a lc o s t u s e dt oo w n ， m a i n t a i na n du p g r a d et h ec o m p u t e r si sb e c o m i n gu n m a n a g e a b l e a sa r e s u l to ft h e r i s i n g c o s tp r o b l e m ，t h e r e i sa l li n c r e a s i n gm o v e m e n tt oam o r ec e n t r a l i z e d c o m p u t i n gm o d e l t h er e m o t e a c c e s sc o m p u t i n gm o d e l i so n ee m b o d i m e n to fs u c ha m o v e m e n t t h o u g ht h er e m o t e a c c e s sc o m p u t i n gm o d e li s s i m i l a rw i t ht h ec e n t r a l i z e d c o m p u t i n gm o d e li nt h em a i n f r a m ee r a ，m o d e mu s e r sa r en o ts a t i s f i e du s i n ga s c i i t e x t st o r e p r e s e n tt h ei n p u t s a n do u t p u t so ft h ea p p l i c a t i o n sa n ym o r e t h e r e m o t e a c c e s sc o m p u t i n gm o d e lm u s ts u p p o r tt h er i c h m e d i ae n v i r o n m e n t st om e e t t h eu s e r s e x p e c t a t i o n t h ec o r et e c h n ol o g yt o a c h i e v ear i c hr e m o t e a c c e s s e x p e r i e n c ei st h er e m o t er i c h m e d i ap r e s e n t a t i o n r e m o t er i c h - m e d i ap r e s e n t a t i o n m a k e st h er i c hm e d i a ( e g ，t h eg r a p h i c su s e ri n t e r f a c e s ，m u l t i m e d i ad i s p l a y , 3 d g r a p h i c sd i s p l a y ，e t c ) a tt h er e m o t e s e r v e rs i d er e a l t i m et r a n s m i t t e da n dp r e s e n t e dt o t h ec l i e n t s ，a n dm e a n w h i l es u p p o r t sl o w l a t e n c yi n t e r a c t i o nw i t ht h ee n d u s e r s w i t ht h er a p i dd e v e l o p m e n t so ft h eg e n e r a lc o m p u t i n gp r o c e s s o r s ( e g ，c p u ) a n dt h eg r a p h i c sp r o c e s s o r s ( e g ，g p u ) ， h i g h f l a m e - - r a t e3 dg r a p h i c sg a m e sa n d c o n t e n ti si n c r e a s i n g l yb e c o m i n gd i v e r s e f r o mt h ew o r dp r o c e s s i n ga p p l i c a t i o nt o m u l t i m e d i aa p p l i c a t i o n s ，t h er i c h - m e d i a a n di t sd a t aa m o u n tb e c o m i n gh u g e t h e c o m p l i c a t e dr i c h m e d i a c o n t e n tb r i n g su sm a n yc h a l l e n g e st oa c h i e v ee f f i c i e n t c o m p r e s s i o n t r a n s m i s s i o na n d i n t e r a c t i o nf o rr i c h m e d i a s i na d d i t i o n ，i nt h e e n v i r o n m e n t so ft h eh e t e r o g e n e o u sn e t w o r k ss u c ha st h ei n t e m e t ，r e m o t er i c h - m e d i a p r e s e n t a t i o nh a st oc o u p l ew i t hd i f f e r e n tb a n d w i d t h s ，d i f f e r e n tt r a n s m i s s i o nd e l a y s a n db a n d w i d t hf l u c t u a t i o n m o r e o v e r ，t h ec l i e n td e v i c e sa r eu s u a l l yd i f f e r e n to nt h e p r o c e s s i n ga b i l i t y , t h el i n kb a n d w i d t h ，t h ed i s p l a yr e s o l u t i o na n d e t c h o wt om a k e t h er e m o t er i c h m e d i as e r v i c ea c c e s s i b l et ot h e s ev a r i o u sd e v i c e si sa l s oc h a ll e n g i n g t h i sp a p e rh a sc o n d u c t e da ni n d e p t hi n v e s t i g a t i o no nr e m o t er i c h m e d i a p r e s e n t a t i o n w ep r o p o s e d ah i g h p e r f o r m a n c er e m o t er i c h - m e d i ap r e s e n t a t i o n s y s t e ma n dp r o p o s e d s e v e r a li n n o v a t i v e t e c h n i q u e s t of u r t h e r i m p r o v e t h e p m s e n t a t i o ne x p e r t e n c e s ，r e d u c e b a n d w i d t h c o m p u t i n g r e s o u r c e c o n s u m p t i o m 1 m p r o v et h ea d a p t a t i o nt ot h eh e t e r o g e n e o u sn e t w o r k s d e v i c e s ，a n di m p r o v e t h eu s e r m t e r a c t i v ee x p e r i e n c e s t h em a i nc o n t r i b u t i o no ft h i sp a p e rc o v e r ss e v e r a l a s p e c t s ， w h i c hi sl i s t e da sf o l l o w s f 盯s t ，w ep r o p o s e dah i g h - p e r f o r m a n c er e m o t er i c h m e d i ap r e s e n t a t i o ns y s t e m i nt h l 3s y s t e m , w ed e v e l o p e dal o w - l e v e l c o m p r e s s i o n f r i e n d l ya r c h i t e c t u r e t o r e p r e s e n tt h er i c h m e d i ad i s p l a yi n f o r m a t i o n w i t h i nt h em o d e l , w ef u r t h e rp r o p o s e d a l le f f i c i e n ta n de f f e c t i v ec o m p r e s s i o ns c h e m ef o rs c r e e n sw i t hc o m p o u l l d c o n t e n t s ih e p r 0 j ) o s e ds c r e e nc o d e ci sb a s e do nf i x e d b l o c k s a n de m p l o y sa d a p t i v e c o m p r e s s l o nm e c h a n i s m sf o rd i f f e r e n t c a t e g o r i e so fc o n t e n t s t op r o v i d eu s e r s h i g h - f i d e l i t yi n t e r a c t i v ee x p e r i e n c e s ，w ed e v i s e das n l a r to p t i o no ff i t t i n gt h ea c t i v e w i n d o wt ot h ev i s i b l er e g i o no ft h ec l i e n t w ea l s op r o p o s e da na d a _ p t i v eb u 虢r c o n t r o im e c h a n i s mt oa d a p tt ot h ev a r i o u sn e t w o r kb a n d w i d t h s w ee v a l u a t e dt h e p e r t o r m a n t e so ft h ep r o p o s e ds y s t e mo nr e a l a p p l i c a t i o n so v e raw i d er a n g eo f n e t w o r ke n v i r o n m e n t s t h ee x p e r i m e n t a lr e s u l t ss h o wt h a tt h e p r o p o s e ds y s t e m d e i l v e 体s u p e r i o rp e r f o r m a n c e sc o m p a r e dw i t ht h ep r e v i o u sr e m o t e r i c h m e d i a p r e s e n t a t i o ns y s t e m s s e c o n d ，w ep r o p o s e da ne f f i c i e n ts c r e e ne n c o d i n gs o l u t i o nf o rs c r e e ns h a r i n gt o m u l t i p l ec l i e n t s t h i ss o l u t i o ns u p p o r t so n e p a s se n c o d i n gt o g e n e r a t em u l t i p l e b i t s t r e a m sw i t hd i f f e r e n tb i t r a t e s t h eo n e - p a s se n c o d i n ga l g o r i t h m e n a b l e st h eh o s t t oo n j y1 n v o l v ei no n e 。p a s se n c o d i n gp r o c e s sf o rm u l t i p l eb i t r a t e s ，a n da sa r e s u j t t h ec o m p u t a t i o nc o m p l e x i t yo ft h eh o s ti s d e c r e a s e ds i g n i f i c a n t l y s p e c i a i l y i nt h e c o r e p u t i n gr e s o u r c ec o n s t r a i n e d e n v i r o n m e n t s ，o u ra l g o r i t h mc a ns i g n i f i c a n l 】v i m p r o v et h es c r e e n s h a r i n gp e r f o r m a n c e s u p p o r tt h ef a s tt r a n s c o d i n ga tt h ed a t a m o r e o v e r , o u re n c o d i n gs o l u t i o nc a na l s o c e n t e rt o s u p p o r tl a r g e - s c a l ec l i e n t st h a t a c c e s st h es c r e e n 。s h a r i n gs e r v i c ea tt h es a m e t i m e e x p e r i m e n t a lr e s u l t sd e m o n s t r a t e t h a tt h ep r o p o s e df a s tt r a n s c o d i n gc a n g r e a t l ya c c e l e r a t et h ep r o c e s s i n g in l r d ，w e p r o p o s e da na l g o r i t h mt o e m p l o yt h eg p ut oa c c e l e r a t et h e 8 c r e e n - e n c o d i n gp r o c e s si nt h er e m o t er i c h m e d i ap r e s e n t a t i o n s y s t e m i nt h i s a l g o r i t h m , w el e v e r a g e da l lt h ec o m p u t i n gm o d u l e s e x c e p tt h ee n t r o p yc o d e ri n t ot h e g p ui no r d e rt ou t i l i z et h ep a r a l l e l i s mo fg p u r e s u l t si n d i c a t et h a tt h ep r o p o s e d g p u 。a s s i s t e ds c r e e ne n c o d i n gc a ns i g n i f i c a n t l ya c c e l e r a t et h ec o m p r e s s i o n p r o c e s s a tt h er e m o t es e r v e rs i d e f o r t h ，w ep r o p o s e daf a s tv i d e ot r a n s c o d i n gs c h e m et o d e a lw i t ht h ev i d e o i v a b s t r a c t _ 一一_ _ 一 c o n t e mi i lt h er i c h m e d i at h a ti sp r e s e n t e df r o mt h er e m o t es e r v e rt ot h ec l i e n t w e p r o p o s e d ar a t e d i s t o r t i o no p t i m i z a t i o nm o d e lb o t h f o rt h ep i x e l d o m a i na n d t r a n s f o n n d o m a i l lf a s tt r a n s c o d i n g i nt h i sm o d e l ，t h ed i s t o r t i o n , d e f i n e d a st h e d i f f e r e n c eo ft w op r e d i c t i o n sw h i c hc o m ef r o mt w od i f f e r e n ts e t so fm o t i o nv e c t o r s b u tt h es a m er e f e r e n c e ，i sd e m o n s t r a t e da p p r o x i m a t e l yl i n e a rt ot h em o t i o nv e c t o r m s e s ot h ed i s t o r t i o nc a nb ee s t i m a t e df l e ef r o ms a d s s d ，a n d t h ec o m p l e x i t yo f r a t e d i s t o r t i o no p t i m i z a t i o n i s s i g n i f i c a n t l y r e d u c e da sw e l l w ea p p l i e dt h e t r a l l s c o d i n gs c h e m et oh 2 6 4 a v c e x p e r i m e n t a lr e s u l t ss h o wt h a t o u rp r o p o s e d t r a n s c o d i n g s c h e m e si n p i x e l t r a n s f o r m d o m a i na l o n gw i t h t h e p r o p o s e d r a t e d i s t o r t i o no p t i m i z a t i o nm e t h o dp r o v i d eb e t t e rp e r f o r m a n c e si nt e r m so f t r a d e 。o f f b e t w e e nh i g hp e r f o r m a n c ea n dt r a n s c o d i n gs p e e d f i f t h , b a s e do no u rp r o p o s e d r i c h m e d i ap r e s e n t a t i o ns y s t e m , w eb u i l ta p r o x y b a s e dr i c hm o b i l ew e bb r o w s e r w eu s e dt h es e r v e r - s i d ew e b p a r s i n ga n d r e n d e r i n gt ol e v e r a g et h eb r o w s e rc o m p u t i n gl o g i c w eu s e dac o m p o s i t e s c r e e n f o r m a tt or e p r e s e n tt h ed i s p l a yo ft h ew e bc o n t e n t ，i n c o r p o r a t i n gt h ew e b b a c k g r o u n d s c r e e na n dt h ed y n a m i cw e b e l e m e n t s a n dt h e nw ee m p l o y e das l i c e b a s e ds c r e e n e n c o d i n gt oe f f i c i e n t l yc o m p r e s st h ew e bb a c k g r o u n ds c r e e na n du p d a t et h es c r e e n t ot h ec l i e n t w ea l s ou s e dap r o g r e s s i v es c r e e nu p d a t i n gm e c h a n i s mt om a p r o v et h e p a g el a t e n c y b e s i d e st h ed i s p l a ys c r e e no ft h ew e bc o n t e n t ，w ea l s o s e n dt h es i d e i n f o r r n a t i o no ft h ew e be l e m e n t st oe n a b l et h ed e s i g n e de l e m e n t - l e v e li n t e r a c t i o n m e c h a n i s m s t h ee x p e r i m e n t a l r e s u l t ss h o wt h a to u rb r o w s e rc a na c h i e v et h e s u p e r i o rb r o w s i n gs p e e d ，c o m p a r e dw i t ht h en a t i v eb r o w s e ra n dy i e l d m u c hb e t t e r v i s u a lq u a l i t yt h a nt h ee x i s t i n gp r o x y - b a s e db r o w s e r k e yw o r d s ：r i c h m e d i a ，r e m o t e r i c h m e d i a p r e s e n t a t i o n , r e m o t e d e s k t o p ， t h i n c l i e n t s y s t e m , i n t e r a c t i v em e d i as y s t e m , s c r e e nc o d e c ，v i d e o t r a n s c o d i n g ，m o b i l eb r o w s e r v 中国科学技术大学学位论文原创性声明 本人声明所呈交的学位论文，是本人在导师指导下进行研究工作所取得的 成果。除己特别加以标注和致谢的地方外，论文中不包含任何他人已经发表或 撰写过的研究成果。与我一同工作的同志对本研究所做的贡献均已在论文中作 了明确的说明。 作者签名： 中国科学技术大学学位论文授权使用声明 作为申请学位的条件之一，学位论文著作权拥有者授权中国科学技术大学 拥有学位论文的部分使用权，即：学校有权按有关规定向国家有关部门或机构 送交论文的复印件和电子版，允许论文被查阅和借阅，可以将学位论文编入中 国学位论文全文数据库等有关数据库进行检索，可以采用影印、缩印或扫描 等复制手段保存、汇编学位论文。本人提交的电子文档的内容和纸质论文的内 容相一致。 保密的学位论文在解密后也遵守此规定。 回公开口保密( 年) 作者签名： 导师签名： 签字日期：b 。il 。 第1 章绪论 第1 章绪论 1 1 引言 在最近的几十年中，计算模型已经从集中式大型机计算模型转变为分布式的 桌面计算模型。但是，在如今的较大的公司或组织中，个人计算机变得普遍存在 并且保有量越来越大时，用于维护这些计算机的开销变得越来越难以控制。而当 移动笔记本电脑、手持智能设备等用来存储和处理信息时，不断增加的维护开销 问题将变得更加严重。由于这些设备可移动，所以它们极有可能丢失、损坏等， 那么必然需要添加额外的开销来管理、保护和恢复在这些移动设备上存储的敏感 数据和信息。由于不断增加的管理和维护开销，人们又开始趋向于集中和更易于 管理的计算模型。远程访问计算模型就是这种趋势的一个具体表现。 远程访问系统的目标是集中计算资源使得对用户端能够更简单的维护、更新 与管理。在一个远程访问环境中，终端客户可以从使用一个全功能的计算机变成 使用一个更轻量的主要用来显示与输入的机器。这个机器通常就叫瘦客户机。它 不需要复杂的维护以及频繁的更新。公司或组织就可以通过网络给自己的瘦客户 机用户提供远程服务器上的计算资源。远程服务器上的计算资源可以被很多用户 共享使用，这也使得计算资源能够更加有效的利用。 虽然远程访问计算模型类似于大型机时代的集中计算模型，但是如今的用户 已经不满足于只使用a s c i i 文本来表示输入与输出。远程访问系统必须有效地 支持富媒体环境来满足客户的需求。达到这样的目的的关键技术就是远程富媒体 呈现技术使得丰富的图形显示能够通过网络实时地传输并呈现在客户端。 随着处理器计算速度和图形芯片处理速度的快速发展，桌面应用越来越丰富。 从早期简单的文本处理软件到如今绚丽的3 d 游戏画面和多媒体应用，桌面应用 的显示内容越来越复杂，桌面应用与入的交互也越来越丰富。人们通常把能够提 供给用户丰富体验的桌面应用称为富桌面应用( r i c hd e s k t o pa p p l i c a t i o n ) 。同 时，由于互联网技术的发展，人们期望w e b 应用能提供桌面应用所提供的美好 体验。于是，人们提出了富互联网应用( r i c hi n t e m e ta p p l i c a t i o n , r i a ) 技术来 将桌面应用的丰富的显示交互能力与广泛使用的w e b 技术相结合，提供给网络 用户丰富的用户体验。人们把这些富桌面网络应用所表现出来的媒体数据称为 富媒体( r i c h m e d i a ) 。富媒体不仅包括计算机生成的图形用户界面的显示内容 也包括图像、视频、声音以及其他内容的多媒体数据。但是与一般的线性的多媒 体内容呈现不同，富媒体内容的呈现一般都是非线性的，即支持与用户的交互来 控制和影响富媒体的内容。 第1 章绪论 根据服务器与客户端之间的连接模型，现有的远程富媒体呈现系统可咀分为 三娄。 第一类是一个主机端一个客户端的远程桌面( r e m o t ed e s k t o p ) 或者远程应 用( r e m o t ea p p l i c a t i o n ) 系统。其连接模型如图1 1 所示，其主要目的是为了 控制和使用远程服务器桌面或者远程服务嚣的某个应用。表1 1 列举了几个常用 的远程桌面平台。x w i n d o ws y m e m ( s c h e i f l e ra n d g e t t y s l 9 8 6 ) 是第一个为网络 计算机提供远程图形界面访问与控制的网络协议。其第一个版本在1 9 8 4 年发布， 其现有的协议版本x l i 于1 9 8 7 年发布。1 9 9 6 年，m i c r o s o f t 伴随w i n d o w s n t4 0 发布了其为w m d o w s 系统开发设计的远程桌面访问协议r e r n o t e d e s k t e dp r o t o c o l ( r d p ) 阻及其相应的远程桌面访问软件t e r m i n a ls e r v i c e s 。其后续版本广泛地 存在于微软的w i n d o w s 系列系统中( 包括w i n d o w s m o b i l e ) ，而其客户端也存在 于l i n u x 、u n i x 、m a c o s x 以及其他操作系统中。v n c ( v i r t u a l n e t w o r k c o m p u t i n g ) 是第一个基于位图方式来表示富媒体的远程桌面共享系统( r i c h a r d s o nte ta l 1 9 9 8 ) 。其使用r f b ( r e m o t ef r a m e - b u f i e r ) 桌面共享协议来访问和控制远程计 算机。它将键盘与鼠标输八从客户端传至远程主机端，并把远程主机端的屏幕更 新传回客户端作为对输入的响应。 过去几年，人们还开发了一些近程访问系统柬使用专门的远程应用，比如远 程使用多媒体、3 d 服务等。t r u n m n 等人在1 9 9 8 年提出了l n f o p a d 多媒体终端 ( t r u m a ne ta l1 9 9 8 ) 。该终端专门为无线环境下远程获取多媒体服务而优化实现。 h u m p h r e y s 等人在2 0 0 2 年提出了c h r o m i u m 系统。该系统将3 d 处理的计算量转 移剑远程计算机群中，本地使用该系统中的客户端来获取远程端渲染好的3 d 内 容。 、t $ e 厂v e rc l i e n t ，) ：竺：! 虱 i = 三= 盈丝塑婴口 图1 i ：一个主机端一个客户端的富媒体呈现系统( 引自( r i c h a r d s o n te ta l1 9 9 8 第l 章绪论 表i - 1 ：几个较常用的远程桌面平台，引自( l a ia m ，a n dn i e hj 2 0 0 6 ) p l a t f o r m d i s p l a y d i s p l a y s c r e e n c o m p r e s s i o n m a x t r a n s p o r t p r o t o c o l e n c o d i n gu p d a t e s d i s p l a y p r o t o c o l d e p t h c i t r i xi c al o w 1 e v e l s e r v e r - p u s h ， i u e8 b i tt c p i p m e t a f r a m e g r a p h i c sl a z y c o l o r m i c r o s o f t r d p l o w - l e v e ls e r v e r - p u s h ，r l e8 b i tt c p i p t e r m i n a l g r a p h i c sl a z y c o l o r s e r v i c e s t a r a n t e l l apl o w 1 e v e l s e r v e r - p u s h ，a d a p t i v e l y 8 b i tt c ：p i p g r a p h i c se a g e r o r e n a b l e d ， c o l o r l a z y r l ea n d d e p e n d i n g l z wa tl o w o n b a n d w i d t h s b a n d w i d t h ， i o a d 甑8 己tv n c v n c2 dd r a wc l i e n t p u l l ，h e x t i l e ( 2 d 2 4 b i tt c ：p i p p r i m i t i v e sl a z yu p d a t e sr l e ) c o l o r b e t w e e n c l i e n t r e q u e s t s d i s c a r d e d s u n r a y s u n 2 dd r a w s e r v e r - p u s h ， n o n e2 4 b i tu d p i p r a v p r i m i t i v e se a g e r c o l o r x 1 1 r 6x h i g h l e v e ls e r v e r p u s h ， n o n e2 4 一b i tt c p i p g r a p h i c se a g e r c o l o r 第二类是多个主机端一个客户端的分布式桌面计算。其连接模型如图1 2 所示。z h a n gy e ta l ( 2 0 0 6 ) 提出了一个分布式虚拟计算平台r e d a r 。r e d a r 将从 分布式的服务节点的服务应用的用户界面整合到一起组合成一个虚拟桌面，然后 将虚拟桌面远程呈现到本地的瘦客户机中。分布式虚拟桌面计算模型使得用户可 以访问大范围的计算、存储和数据资源，并且也使得这些资源能够被广泛有效地 使用，这正是实用计算( u t i l i t yc o m p u t i n g ) 、普适计算( u b i q u i t o u sc o m p u t i n g ) 和云计算( c l o u dc o m p u t i n g ) 所提倡的。 第1 章绪论 f 【? 、c nr 图i 2 ：多个主机端个客户端的富媒体呈现系统( 引自f z h a n g ve l 引2 6 第三类是一个主机端多个客户端的远程富媒体呈现系统。其多运用在多人参 与的在线桌面会议，其连接模型如图1 3 所示。在网络会议中，往往多个参与者 使用各种不同的设备通过互联网在一起，并远程观看、访问演讲者的桌面或者某 个应用的界面，比如m i c r o s o f tp o w e r p o h 1 t 。为了同时支持井服务于互联网上大 量的客户，网络会议软件提供商往往使用和维护数据中心中高带宽的i c 4 络服务器 米服务f 互联网上的客户。