（计算机科学与技术专业论文）面向组播环境的高性能路由器qos机制研究与实现.pdf

国防科学技术大学研究生院学位论文 摘要 互联网已经不再是单一的数据业务网，v o l p 、视频会议、网络游戏以及其它 多媒体应用占据的比例日益增多，这些业务不仅需要互联网改变以往尽力而为的 服务模式，针对不同的业务提供有差别的服务，而且许多应用，如i p t v 等，还需 要能够大大地节省网络带宽的组播技术的支持。此外，网络流量的急剧增长所导 致的日益严重的网络拥塞问题，对q o s 和组播技术的发展提出了迫切需求。 实施拥塞控制是q o s 机制正常工作的必要前提。长期以来，大部分研究工作 主要集中在端系统上如何实施有效的端到端拥塞控制。近年来，学术界逐步认识 到在网络中间结点上，如高性能路由器，如何有效运用拥塞控制机制的重要性。 这是因为路由器作为互联网的核心设备，在很大程度上决定了网络的性能。迄今 为止的相关研究在拥塞控制机制、算法、改进措施等方面均取得了可喜的进展， 但研究高性能路由器的q o s ，不仅要重视拥塞控制、丢弃策略等单方面技术的研 究，还必须重视如何从路由器的整体上支撑q o s 的研究，从影响q o s 的各个方面 入手，经过整体分析研究，综合采取多种技术解决性能瓶颈。因此，研究路由器 对q o s 的支持成为网络q o s 研究中的重要环节。 本文在区分服务体系结构下，从路由器的网络拥塞控制入手，针对组播环境 下高性能路由器的q o s 及其支撑机制展开研究，通过软硬件协同处理机制，在模 型指导下，建立了一个高效的路由器q o s 处理机制q o sr e s m ，研究并提出了一 系列相关算法，有效提高了路由器的q o s 能力。 q o s建立于组播环境下高性能路由器模型 之上，该机_resmq o sm qr o u t e r 制给出了对区分服务的支持策略、队列设计方法、阈值机制和流量控制机制，并 研究了支持组播的丢弃概率表的设计方法。首次提出了充分利用路由器全局拥塞 信息指导流量控制，及早避免或缓解系统拥塞的思想。 论文研究并实现了m q r o u t e r 模型的全局流量控制算法。设计了报文丢弃策 略：利用队列闽值与报文属性闽值相结合的多闽值控制机制，对不同优先级的报 文进行相应的处理；对于等待交换的报文和等待输出的报文，根据丢弃概率进行 丢弃。并且运用稳定性理论原理给出了报文丢弃概率的计算方法。 论文研究并实现了m q r o u t e r 模型的宏差分流带宽管理算法。该算法根据每 条流的供给速率是否符合其最小带宽和最大带宽要求、流的优先级以及系统的拥 塞情况，决定流的丢弃概率，进行丢弃决策，从而调整每条流获得的带宽，满足 第i 页 国防科学技术大学研究生院学位论文 每条流的q o s 需求。 论文研究并实现了m q r o u t e r 模型的两种并行支撑机制，即网络处理器多线 程并行处理机制对报文处理速度的影响、并行存储访问机制对系统吞吐量的影响， 给出了有效的解决方案。 上述全局流量控制算法、宏差分流带宽管理算法、多线程并行处理机制以及 并行存储访问机制均在基于m q r o u t e r 模型的高性能q o s 路由器原型系统中得到 了实验验证，验证结果表明，上述算法或机制均能有效改善路由器的相关技术指 标，综合采用上述措旖能够显著提高路由器的整体q o s 性能。 本文的研究受到国家自然科学基金重点课题和国家8 6 3 计划重点课题支持， 主要研究成果己应用于“新一代互联网高性能路由器”，取得了良好的效果。该 项目2 0 0 6 年国家科技进步奖二等奖己通过评审。 关键词：区分服务、高性能路由器、q o s 、拥塞控制、多阈值控制、全局拥 塞信息、宏差分流、并行 第i i 页 国防科学技术大学研究生院学位论文 a b s t r a c t t h ei n t e m e ti sn ol o n g e rad a t as e r v i c eo n l yn e t w o r k w i t 1f a s tg r o w i n g a p p l i c a t i o n s s u c ha sv o i p , v i d e oc o n f e r e n c i n g ，n e t w o r kg a m e sa n dm u l t i m e d i a e n t e r t a i n m e n te t c ，t h eu r g ed e m a n df o rh i g h e ra n dm o r ep r e d i c t a b l eq u a l i t yo fs e r v i c e h a sb e e na r o u s e d t h en e t w o r ki se x p e c t e dt oo f f e rm o r et h a nb e s t e f f o r ts e r v i c e sw i t h d i f f e r e n t i a ls e r v i c e sf o rd i f f e r e n ta p p l i c a t i o n s f u r t h e r m o r e ，m a n ya p p l i c a t i o n sl i k e i p t vn e e dm u l t i c a s t i n gt e c h n o l o g y s u p p o r t t oa c h i e v et h ee c o n o m i cu s a g eo f b a n d w i d t h a t 也es a m et i m e t h eh i g h e ra n dh i g h e rt r a f f i cm a k e st h en e t w o r k c o n g e s t i o nam u c hm o r es e r i o u sp r o b l e m t h u si tb e c o m e sa nu r g e n tj o bt od e v e l o p m u c hm o r es o p h i s t i c a t e dq o sa n dm u l t i c a s t i n gt e c h n o l o g i e s p e r f o r m i n gc o n g e s t i o nc o n t r o li s o n eo ft h ep r e c o n d i t i o n sf o rt h ee f f i c i e n tq o s m e c h a n i s m s f o ry e a r s ，l o t so fr e s e a r c he f f o r t sf o c u so nt h ee n d - t o - e n dc o n g e s t i o n c o n t r 0 1 r e c e n t l y , p e o p l er e a l i z et h a ti ti sv e r yi m p o r t a n tt oa p p l ye f f i c i e n tc o n g e s t i o n c o n t r o lm e c h a n i s m so nt h ei n t e r m e d i a t en e t w o r kn o d e ss u c ha sh i g hp e r f o r m a n c e r o u t e r sb e c a u s et h e yd e t e r m i n eal a r g ep o r t i o no ft h en e t w o r kp e r f o r m a n c e m a n y a c h i e v e m e n t sh a sb e e nm a d ei nr e l a t e dr e s e a r c h e so nc o n g e s t i o nc o n t r o lt e c h n o l o g i e s b u tw et h i i 止t h a tt os o l v et h eq o sp r o b l e mb e n e r , i ti sm u c hm o r ei m p o r t a n tt os t u d y a n da p p l yt h eo v e r a l lq o ss u p p o r t i n gm e c h a n i s m sf o rt h eh i g hp e r f o r m a n c er o u t e r s s y s t e m a t i c a l l yr a t h e rt h a na p p l y i n gt h ei n d i v i d u a lt e c h n o l o g ys u c ha sc o n g e s t i o nc o n t r o l o n l y t h ep e r f o r m a n c e b o t t l e n e c k sw i l lb es o l v e db e t t e rb yi n t e g r a t i n gv a r i o u s t e c h n o l o g i e s ，a l g o r i t h m s ，a n do t h e ri m p r o v e m e n t st o g e t h e ri ne v e r ya s p e c tr e s u l t i n gi n t h eq o sp r o b l e m s t h i sd i s s e r t a t i o ns t u d i e st h ec o n g e s t i o nc o n t r 0 1o fr o u t e r sf i r s t ，a n dt h e nd i s c u s s e s t h eh i g hp e r f o r m a n c er o u t e rq o sa n di t ss u p p o r t i n gm e c h a n i s m su n d e rt h em u l t i c a s t e n v i r o n m e n ti nad i f f e r e n t i a t es e r v i c ea r c h i t e c t u r e a ne f f i e i e n tq o sp r o c e s s i n g m e c h a n i s m ，q o s _ r e s m ，f o rah i g hp e r f o r m a n c er o u t e rp r o t o t y p ei sd e v e l o p e d i n w h i c ht h eh a r d w a r ea n ds o f t w a r ep r o c e s s i n gm e t h o da r ec o m b i n e dt o g e t h e r a n da s e r i e s a l g o r i t h m sh a sb e e np r o p o s e di nt h em e c h a n i s m t h i si m p r o v e st h e r o u t e r s q o sc a p a b i l i t ye f f i c i e n t l y t h e q o s _ r e s mi s b u i l du n d e rt h eh i g l l p e r f o r m a n c eq o s r o u t e rm o d e l ， m q r o u t e ri nm u l t i c a s te n v i r o n m e n t i nq o s _ r e s m ，t h es u p p o r t i n gp o l i c i e s o f d i f f s e r v , t h ed e s i g nm e t h o d so fq u e u e s ，t h et h r e s h o l dm e c h a n i s m sa n df l o wc o n t r o l m e c h a n i s m s ，a n dt h ed e s i g no fd r o pp r o b a b i l i t yt a b l es u p p o r t i n gm u l t i c a s t i n gf l o w sa r e p r o v i d e d an e w r o u t e rf l o wc o n t r o lm e t h o di sp r o p o s e dw h i c hm a k e su s eo ft h eg l o b a l c o n g e s t i o ni n f o r m a t i o nt oa v o i do ra l l e v i a t et h es y s t e mc o n g e s t i o ne a r l i e r t h en e wc o n g e s t i o nc o n t r o la l g o r i t h mb a s e do nt h er o u t e r sg l o b a lp o r t ss t a t e s i n f o r m a t i o ni sd e s i g na n di m p l e m e n t e d ap a c k e t sd r o p p i n gp o l i c yi sd e s i g n e df o rt h e 第i i i 页 国防科学技术大学研究生院学位论文 a l g o r i t h m t h ep o l i c yp r o c e s s e sp a c k e t sw i t hv a r i o u sp r i o r i t i e sd i f f e r e n t l yb yu s eo f m u l t i t h r e s h o l dm e c h a n i s mo ft h ec o m b i n a t i o n o fq u e u et h r e s h o l d sa n dp a c k e t s a t t r i b u t i o nt h r e s h o l d s f o rt h ep a c k e t sw a i t i n gf o rs w i t c h i n gt ot h ee g r e s ss i d eo ft h e r o u t e ro ro u t p u t t i n gt ot h en e x tn o d ei nt h en e t w o r k ，t h ed r o p p i n gd e c i s i o ni sm a d eb y t h ed r o pp r o b a b i l i t y ad r o pp r o b a b i l i t yc o m p u t i n gm e t h o db a s e do nt h es t a b i l 时t h e o r y i sp r o v i d e d an e wb a n d w i d t hm a n a g e m e n ta l g o r i t h mb a s e do np i l e i e dd i f f s e r vf l o wi ss t u d i e d a n di m p l e m e n t e d t h i sa l g o r i t h mc o m p u t e st h ed r o pp r o b a b i l i t ya c c o r d i n gt ot h eo f f e r e d r a t e ，t h ep r i o r i t yo ft h ep i p e dd i f f s e r vf l o wa n dt h es y s t e mc o n g e s t i o nd e g r e e t h i sc a n a d j u s tt h eb a n d w i d t ho f e v e r yf l o wt os a t i s f yt h eq o sr e q u i r e m e n t s t w oe f f i c i e n tq o s s u p p o r t i n gm e c h a n i s m so fm q r o u t e rb a s e do np a r a l l e l t e c h n o l o g i e s a r es t u d i e da n di m p l e m e n t e d t h ef i r s ti st h en e t w o r kp r o c e s s o r m u l t i t h r e a dp a r a l l e lp r o c e s s i n gm e c h a n i s mw h i c hi m p a c t st h ep a c k e tp r o c e s s i n gr a t e ， w h i l e 恤es e c o n di st h ep a r a l l e ls t o r a g ed a t aa c c e s sm e c h a n i s mw h i c hi m p a c t st h e s y s t e mt h r o u g h p u t t h ec o n g e s t i o nc o n t r o la l g o r i t h m ，t h eb a n d w i d t hm a n a g e m e n ta l g o r i t h m ，t h e p a r a l l e lp r o c e s s i n gm e c h a n i s ma n dt h ep a m l l e ls t o r a g ea c c e s s i n gm e c h a n i s mm e n t i o n e d a b o v ea r e t e s t e do nt h ep r o t o t y p es y s t e mo fah i g hp e r f o r m a n c er o u t e rb a s e do n m q r o u t e rm o d e l ，t h et e s tr e s u l t si n d i c a t et h a tt h e s ea l g o r i t h m sa n dm e c h a n i s m sc a n n o to n l yi m p r o v et h er e l a t e dc h a r a c t e r i s t i c si n d i v i d u a l l y , b u ta l s oi m p r o v et h er o u t e r s o v e r a l lq o sp e r f o r m a n c eb yi n t e g r a t i n ga l lt h o s et e c h n o l o g i e st o g e t h e r t h ew o r ko ft h ed i s s e r t a t i o ni ss u p p o r t e db yt h ei m p o r t a n tp r o j e c to fn a t i o n a l s c i e n c ef o u n d a t i o no fc h i n a ( n s f c ) a n dt h ei m p o r t a n tp r o j e c to fn a t i o n a lh i g h - t e c h r e s e a r c h ( 8 6 3 ) p r o g r a m t h em a j o rr e s u l t sa r es u c c e s s f u l l ya p p l i e di nd e v e l o p i n gt h e n e wg e n e r a t i o ni n t e r n e th i g hp e r f o r m a n c er o u t e r ” k e y w o r d s ：d i f f e r e n c i a t e ds e r v i c e s h i g h p e r f o r m a n c er o u t e r s ，q o s ， c o n g e s t i o nc o n t r o l ，m u l t i - t h r e s h o l d sc o n t r o l ，g l o b a lc o n g e s t i o ni n f o r m a t i o n ， p i p e dd i f f s e r vf l o w ，p a r a l l e l 第i v 页 国防科学技术大学研究生院学位论文 图索引 图1 1 存储器访存速率、传输带宽、路由器性能和网络流量的增长速度3 图i 2i p v 4 和i p v 6 报文头中的区分服务字段。5 图l - 3q o s 研究框架7 图2 一1 丢弃概率与平均队列长度。 图2 2 网络处理器的硬件体系结构 图2 - 3 多级存储结构2 5 图2 - 4 ( a ) 总容量为m 的乒乓结构，( b ) 受限写，( c ) 非受限写2 6 图3 1q o s 路由器模型m q - r o u t e l - 2 9 图3 - 2 m q - r o u t e r 的路由器q o s 处理机制q o sr e s m 图3 - 3 输入端队列设计 图3 4 _ a 输出端队列设计3 8 图3 - 4 b 输出端宏差分流和流队列设计3 8 图3 5 多阙值条件下传输的报文类型4 l 图3 6 全局拥塞控制反馈机制4 2 图3 7 队列占有率与传输概率的关系。4 3 图3 - 8 传输丢弃概率表结构。 图3 - 9 m q - r o u t e r 模型的拥塞控制时机4 5 图3 一l o 流队列调度示意图4 7 图4 1 拥塞控制模型5 0 图4 2 基于多阈值控制机制的输入端接收报文丢弃策略5 3 图4 - 3 输入端报文到达w s q 的丢弃策略5 4 图4 4 基于多阈值控制机制的输出端接收报文丢弃策略5 5 图4 5 输出端报文到达p f q 或f q 或w o q 的丢弃策略5 6 第v 页 国防科学技术大学研究生院学位论文 目| | ! 皇目皇目| 量! 目自e 自| 自! ! ! e e ! ! 自目j | e 奠e 蕾g 鼻皇一i i 图4 6 计算丢弃概率5 8 图4 7 实验案例示意图5 8 图4 - 8 拥塞通告周期的确定5 9 图4 - 9f l o w l 流量的变化对f l o w 2 的影响6 0 图4 1 0f l o w l 流量的变化对总带宽的影响6 l 图4 1 1 报文长度对总带宽的影响6 l 图4 1 2 调节系统流量的最小带宽和最大带宽值6 4 图4 1 3 宏差分流带宽分配6 5 图4 1 4 丢弃概率计算方法6 7 图4 - 1 5 实验案例示意图6 7 图4 1 6 没有带宽竞争时的带宽分配情况6 8 图4 1 7 有带宽竞争时的带宽分配情况6 9 图4 1 8 不同优先级的带宽分配情况7 0 图5 - l3 层转发软件测试的线程停顿频率和周期7 3 图5 22 层转发软件测试的线程停顿频率和周期7 4 图5 3 不同停顿在单个线程运行周期内的分布情况7 4 图5 - 4 多线程模型中的停顿隐藏7 5 图5 5 吞吐率和p e 数的关系。7 6 图5 - 6 不丢包情况下最大带宽利用率与活动线程数的关系7 7 图5 - 7 使用多处理单元网络处理器实现的高性能核心路由器的性能7 7 图5 8s c p 结构7 8 图5 - 9 输出缓冲区管理结构7 9 图5 1 0 帧的信元在s c p 中的存放方式8 0 图5 1 l 实验环境8 l 图5 1 2 发送端带宽占用率为1 0 0 时，两种模式下各端1 ：3 接收到报文数比较8 2 图6 l 路由器模型8 5 第v i 页 国防科学技术大学研究生院学位论文 图6 2 基于n p 的路由器结构8 5 图6 3 网络处理器硬件结构8 7 图6 - 4 控制帧处理线程功能结构9 0 图6 5 转发微码软件系统结构9 l 图6 - 6n p a s 服务组件9 2 图6 - 7n p a s 工作过程 第v i i 页 国防科学技术大学研究生院学位论文 表索引 表1 1 推荐的a f 咖6 表3 1 系统支持的服务3 3 表3 - 2 各种服务所能提供的服务质量3 3 表3 3r r c c 值的含义4 4 表4 _ l百兆转发板的最大实际带宽5 9 表4 2 系统拥塞时的时延比较6 2 表4 3 系统不拥塞时两种算法的时延6 2 表4 4 带宽分配示例l 6 5 表4 5 带宽分配示例2 6 6 表4 - 6 流的q o s 参数配置6 8 表5 1 非并行存储模式下千兆板四口双向性能测试结果8 1 表5 2 并行存储模式下千兆板四口双向性能测试结果8 l 表每l网络处理器连接的存储器8 8 表6 - 2 千兆以太网接口性能测试结果9 9 表6 3a t m 6 2 2 mp o s 接口性能测试结果9 9 第政页 国防科学技术大学研究生院学位论文 a c k a f - f q a f p h b a 姗 a p i a q m a s i c a1 1 l a ：n 订 a v q b a b e b 0 。 b g l n i n b 巴d f bs c p c a g p s c b w f q cg r a d e c m s c p c p a q c p c pt h c s d a s l d c c p d i f f s e r v 英文缩写表 a c k n o w l e d g m e n t a s s u r e df o r w a r d i n gf l o wq u e u e a s s u r e df o r w a r d i n gp e r - h o pb e h a v i o r a d d i t i v ei n c r e a s ea n dm u l t i p f i c a t i v ed e c r e a s e a p p l i c a t i o np r o g r a m m i n gi n t e r f a c e a c t i v eq u e u em a n a g e m c r t a p p l i c a t i o ns p e c i f i ci n t e g r a t e dc i r c u i t a l a r mt h 坨s h o l d a s y n c h r o n o u st r a n s f e rm o d e v h - m a lq u e u e b e h a v i o r a g g r e g a t e b e s t e 丘砒 m a x m u nb a n w i d t hg r a n t d _ i n i m u nb a n w i d t hg r a n t b a n d w i t hm a n a g e m e n to f p i p e dd i f f s e r vf l o w s t o r ec e l l si np a i r si nb a c k c o n g e s t i o nc o n t r o la l g o r i t h mb a s e do na w a r e n e s so fg l o b a l p o r ts t a t e s c l a s s - b a s e dw e i g h t e df a i rq u e u i n g c o n g e s t i o ng r a d e c o u n t e rm a n a g e m e n ts e r v i c e c o n t r o lp o i n t c o n t r o lp a c k e t a c c e p t i n gq u e u e c o m m o np r o g r a m m i n gi n t e r f a c e c o n t r o lp a c k e tt h r e s h o l d c o m m o ns w i t c hi n t e r f a c ea r c h i t e c t u r e d a t a - a l i g n e ds y n c h r o n o u sl i n k d a t a g r a mc o n g e s t i o nc o n t r o lp r o t o c o l d i f f e r e n t i a t e ds e r v i c e s 第妯页 国防科学技术大学研究生院学位论文 d p a q d a t ap a c k e ta c c e p t i n gq u e u e d r a m d y n a m i cr a n d o ma c c e s sm e m o r y d r rd i f i c i tr o u n dr o b i n d sb y t ed i f f e r e n t i a t e ds e r v i c e sb y t e d s c pd i f f e r e n t i a t e ds e r v i c e sc o d e p o i n t d t d y n a m i ct h r e s h o l d e b e g r e s sb u f f e r s e c n e x p l i c i tc o n g e s t i o nn o t i f i c a t i o n e f f qe x p e d i t e df o r w a r d i n gf l o wq u e u e e fp h b e x p e d i t e df o r w a r d i n gp e r - h o pb e h a v i o r e p ce m b e d d e dp r o c e s s o rc o m p l e x e w m a e x p o n e n t i a lw e i g h t e dm o v i n ga v e r a g e f e - c o g e s t i o n f o r w a r de n g i n ec o n g e s t i o ni n f o r m a t i o n f l i d - d lf a i rl a y e r e di n c r e a s e d e c r e a s ew i md y n a n l i cl a y e r i n g f q f l o wq u e u e fs c ps t o r ec e l l si np a i r si nf r o n t g f h g u i d e df r a m eh a n d l e r g p pg e n e r a lp u r p o s ep r o c e s s o r g s sg u a r a n t e e ls c h e d u ls t e p g u pt h g e n e r a lu s e rp a c k e tt h r e s h o l d i d p qi n g r e s sd i s c a dp a c k e tq u e u e i e t f i n t e r a c te n g i n e e r i n gt a s kf o r c e i n t s e r v i n t e g r a t e ds e r v i c e s 碑t vi n t e m e tp r o t o c o lt e l e v i s i o n i p v 4 i n t e r n e tp r o t o c o lv e r s i o n4 i p v 6i n t e m e tp r o t o c o iv e r s i o n6 i s d n i n t e g r a t e ds e r v i c e sd i g i t a ln e t w o r k i s m t h i n g r e s ss h a r e dm e m o r yt h r e s h o m i t ui n t e r n a t i o n a lt e l e c o m m u n i c a t i o nu n i 0 1 1 l l s l o w l a t e n c ys u s t a i n a b l eb a n d w i d t h m a s m e m o r ya l l o c a t i o ns e r v i c e m a x p lm a x i m u nf l o wf o rp o r t s m fm u h i f i e l d 第】【i i 页 国防科学技术大学研究生院学位论文 m mm u l t i c a s ti d e n t i f i e r m p l sm u l t i p r o t o c e ll a b e ls 疵h n g m q - r o u t e t m u l t i c a s t - o f i e n t c dq o s - e n a b l er o u t e r m s g s m e s s a g es e r v i c e m s s m a x i m u m s e g m e n ts i z e m t um a y , 血l mt r a n s p o r tu n i t m u p _ t h m u l t i e a s tu s e rp a c k e tt h r e s h o l d m w s qw a i t i n gf o rs w i t c h i n gq u e u ef o rm u l t i c a s t i n g 煺功 n e wi n c o m i n gt h r e s h o m n l s n o r m a l - l a t e n c ys u s t a i n a b l eb a n d w i d t h n pn e t w o r kp “x 冷鲫 n p a sn e t w o r kp r o c e s s o ra p p l i c a t i o ns e r v i c e o d p qo u t p u td i s c a r dp a c k e tq u e u e o s mt h o u t o u ts h a r e dm e m o r yt h e s h o l d p a q p a c k e ta c c e p t i n gq u e u e p a q _ t h p a c k e ta c c e p t i n gq t h r e s h o l d p b sp e a kb a n d w i d t hs e r v i c e p b s f q p e a kb a n d w i d t hs e r v i c ef l o wq u e u e p b s sp e a kb a n d w i t hs c h e d u l es t e p p c i p e r i p h e r a lc o m p o n e n ti n t e r f a c e p ep r o c e s s o re l e m e n t s p f qp i p e d d i f f s e r vf l o wq u e u e p f q & f q _ t hp i p e d - d i f f s e r vf l o wq u e u ea n df l o wq u e u et h r e s h o l d p o sp a c k e to v e rs o n e t p p pp e e r - p e e rp r o t o c o l p s rp e a ks e r v i c er a t e p t s p h y s i c a lt r a n s m i ts e r v i c e q o sq u a i i t yo f s e r v i c e q o sr e s m aq u sm e c h a n i s mo nh i g hp e r f o r n m c er o u t e r sw i t h e f f e c t i v es u p p o r t i n go f m u l t i c a s t q wq u e u ew e i g h t r b p r a t e - b a s e dp a c i n g r e dr a n d o me a r l yd e t e c t i o n 第x i i i 页 国防科学技术大学研究生院学位论文 r e s r f c r l c r n s s r r s v p s a r e d s c b s c p s l a s m b s r a m t c p t f m c c t f r c t i m s t m s t o s 1 1 p t r a m t s t s e t t l u d p u w s q 、，r o i p v o q v p n w f q w o q w p q w p q 劢 w q s s r e m o t ee g r e s ss t a t u s r e q u e s tf o rc o m m e n t s r e c e i v e r - d r i v e nl a y e r e dc o n g e s t i o nc o n t r o l r o u n dt r i pt u n e s u s t a i n e ds e r v i c er a t e r e s o t t r c er e s e r v a t i o np r