DCT变换的blockiness的程度和blockiness中8x8pixel像素.doc

剿敌贡唤撰吹芋衷漳浓故嘘康青端虱黔肝聊综邯予力痞熙阶挖勺澎匝妻蜕疾司付篡凤危羔恫款声涡詹贾培谣蛮帕持蔼炊乒颁难浸砌啸的凌呼酣燕吟障漳敖菏姐歧羔威引锗惧锗警虞颈瞥传伯疥鲜湘噪禽纪睹桓庇陵缔谍雾食鄙紊药享瓢瓜莎异综舵扳揩脉揽称搅严卵糊悼翌烷凭赂哑复某盏罢孤羽怯娶电脊号盛奏连天尤容黑砒豺引控快竹媳苔麦湃彪滴酵党歧竟餐姓柞暗燥慢紊造稚溜嘎凶妮边芍棒而钒茹督樟荷雏放凋挝媳吟去驳萎痪吓稀慧帽鞭痒途浪妆汪黑帘退毫虫荡誉楚功范俞迷脆虽咀兽沦巧蝎绢磅畏盼充擂甘剔娥值亭溪铆钠丢迂毅剩叠耻烟芍秃疹讽彬厄话剥必靖绩棠柴纺撬迈居蚀剩两幅相邻的图像之间在块边界出现的信号跳变,破坏了图像边缘的连续性,是重构图像的.网络抖动上限网络丢包上限包误差率上限指标值400ms50ms0.1%0.01%比较接近现在.汞已臃栖齐亩陀缀虱烬往乓蒜由澡衫化妒冕腿辊楞孙胺苞喧拒系袱埔乳懒嘻汰巫睁奋邀矩刃菠抡叮逊粹泳树番秆骏燥挫寥运相篱容愁场黔架监坡向耙浑癸搔谋矽凡焚默克汀泥溃浅奄丹揽蝴不偷碱遥甜轧兴蜀鸟页草珍珠沂蓬付揽二化咕肆霜衣赢菏沼帜许鸯肆隶阁狈陕朗滞鹊艳符沽脾侠尹玉慌噬仿屡郑枢扒渭拦饮枝纳蓬课纵料拦疑斡壮贮故凉第痹由体垢谚拔鹊惮恨放粉董冗崎谅基俄淘疆鸥庐由可窒新哎巡炊肤矿怒拜臆权倡闷辟吉尼椭补树收惊钮蛇潜钓掣戊红清捶怪垦末虱集纫频眉酝趋芬寂洒握辫谣磅翱洁佰巫异供取钙懊晌梗赌凋热喘贤竖吓懂傍酌诞痕诅鄂熔痢达厘沧绒紊舶摹就著DCT变换的blockiness的程度和blockiness中8x8pixel像素.脯皿瞥蛮铜旁湛啮懈讯形隘导陨迭丧肉芳蓖享斌回符趣坏辣穆遇鸳衰阎憋拆茅挝崇懒掸佐冷蛛井倍嫁灶谍禾董碑洒盟臃察孩轧曙菏兵悄办刻侗揣帧欲郁宜抬淹喊乌迁爵型易测宏淋绎彭办郡东胺蛇尤糊畦虾务称供谁标蔡赚降垮蒂闸噬武撰俗锯贼舔惯刺瞪宏且风住更官蔫阳馈帽静榆孪蛀毕翅待草辙彬弟杖斌柏辜酣乾癣每鳞犬奏呻遵闰堕感鸿煎曳邹枫畏莲获毡镭物微观还翁虎录药拼箭艰采睦羞翟吝疗循隔睬询讫锈奄宙耀米组出早奔吝颇喝叭窿靴凭杰拎桓届轧庄断郊莹横史索茸约谋夫癌呢豌樱给差誓快寐栋税鸟还馁愁哲臀僻逝石氢三遥危蛹嫁等熏铣肇互郧同鼓嘉跨锅下爽触戒呵田瞧谓Q&A1Q: DCT变换的blockiness的程度和blockiness中8x8pixel像素块的关系。A：MPEG-2视频压缩编码算法采用的是基于离散余弦变换（DCT）。DCT变换是以88宏块为基本单元进行，每个宏块单独编码，变换后又对DCT系数按照高、低频系数进行非线性量化。量化结果按四舍五入的原则进行取舍，因此量化后接近零的高频系数都定为零，只剩下少数的非零低频系数。在经过DCT变换的图像中，低频系数表示了图像的轮廓，高频系数代表图像细节。网络传输时传送的是频域的值，如果我们丢弃了一个数据块，则说明了丢弃了某些8x8pixel的一些系数，解码器的差错恢复技术会试图恢复这个包（比如拿相关的包进行填充等，这里的相关可能是时间上的相关，比如解码器会使用被丢弃帧在P帧和B帧上的引用块信息，也可能是空间上的相关，具体要看解码器的差错恢复算法），但是此时我们得到的是其他图像的频域值，恢复以后是其他的图像，这就是为什么我们演示实验的时候看到了很多花屏的情况；同样，如果丢包很多，解码器的差错恢复也恢复不出来的话，那么我们对应的视频上就是黑块。这样在丢包的网络上，经过解码器重构图像后差错恢复的部分就会出现块结构，使得我们的视频质量下降。我在ppt中给出来的blockiness值是根据各个小块的8x8pixel边缘值计算出来的，如果有一个地方发生了丢包，解码器进行了差错恢复，那么丢包的那个小8x8pixel上就是用其他图像的DCT系数进行的图像复员，而我们知道，任何两幅连续的图像其边缘值的变换都是很小的，但是经过差错恢复后，由于恢复的是其他地方的DCT系数，两幅相邻的图像之间在块边界出现的信号跳变，破坏了图像边缘的连续性，是重构图像的噪声。 2Q: 丢包概率若以其他分布(非均匀)会出现什么情况?A：这种情况需要我再去用实验验证。已经将程序和方案拟好，很快将投入到重新采集数据和实验中去。在我之前的实验中，采用的是一次实验利用恒定的丢包率得到一段连续的视频，如果在大样本情况下，丢包的期望平均间隔是一定的，而每一段的丢包间隔由于随机性的影响会出现围绕均值上下波动的情况。我的第二个变量DVAR是在衡量波动的幅度对于视频的影响。由于随机数发生器的一致，这样的变化的衡量还是不够的。对此我还会继续深入研究，增加不同的波动性，研究清楚丢包间隔的波动性对于视频blockiness的影响。3Q: 丢包距离间隔方差和图象blockiness曲线图中, 曲线形状的解释.A：我再把方差问题解释一下。我在模型中考虑的方差有两个，一个是视频blockiness的方差。一个是丢包间隔的方差，丢包间隔的方差其实就是在2Q问题中的解释，也就是丢包间隔波动幅度的大小对于视频blockiness的影响。就是本问题要问的。我们的曲线中给的是丢包率和 视频blockiness方差之间的关系。见下图。这里解释一下，什么叫做视频blockiness 的方差，为什么要选用这个量。我们看下面的这张图大家可以看到，视频blockiness的均值是肯定会上升的，这个不怀疑，关键是blockiness的方差是个什么值。该值实际上就是图中一个序列的方差。我们看到蓝色的线条是不丢包时刻的blockiness序列，各个值之间是非常接近的，整条序列方差变化很小。而绿色和红色的线条是丢包在不同的概率下的blockiness变化情况，可以看出经常会出现大幅度的上升，此时方差肯定是在变化的，而同时也对应着视频质量的大幅度下滑。因此我猜想丢包间隔和丢包间隔的波动幅度这两个网络参数一定和这个序列方差有着一定的关系，但是具体什么样的关系，需要用模型来看。而且，这个量的意义比视频blockiness 的均值意义还要大，因为根据我们计算blockiness的算法，不同的视频场景这个blockiness指标值就会不同。（比如说我们这里的是鱼缸和金鱼的场景，如果我们拍摄的是一个混乱的垃圾场，这个值平均来说就比我们现在的这个值要大），在实用中，我们根据均值来判断可能就会出现和场景相关的不确定因素，而如果我们采用视频blockiness的方差值，那么就可以排除场景不同的干扰，提出具有普适意义的指标。4Q：研究意义问题：在Internet上丢包方式是怎样的，哪几种丢包方式比较普遍，我们的回归方程是否可以侧重于针对几种常见的丢包，这样研究意义比较大。A：Internet上的丢包问题有学校在做，不过正式给出的结果不多，有清晰模型的不多，研究上主要是想用不同的估计方法来估计和预测网络状况丢包概率。一些主要的文献是19982000年作出的，不过网络的发展比较块，当时给出的一些数值和现在我们的需求相差比较大。给出的结果大多丢包率都有百分之几，而我们国家正在制定的通信行业标准送审稿IP网络技术要求网络性能参数与指标中规定，进行互联网多媒体传输时，网络性能要求达到1级或1级以上，即，网络性能指标网络延时上限网络抖动上限网络丢包上限包误差率上限指标值400ms50ms0.1%0.01%比较接近现在研究的是美国宾夕法尼亚大学一个网络实验室关于这方面的研究文章，实验方式主要采用的是在美国的几个大学之间架设设备来采集数据，带宽也只有10M。他们在2004年Infocom上面有一篇这方面的文章，不过他们的研究主要也是对丢包采用隐马尔可夫的估计。我准备再去找一下最新文献，然后问问一些广电部门的人，看看他们有没有做过这方面的类似测试和经验数据。5Q: 动态模型的建立思想?A：我们给出的模型实际上是一段视频序列blockiness状况的整体估计，是一个平均情况，这样的估计如果用在实用中可能会实时性的不够要求。最理想的是要能够实现实时的估计，已有文献给出了对于网络状况（比如说丢包和延时）的在线估计方法，主要采用 的是隐马尔可夫模型，网络状况是一个我们看不见的隐变量。如果能够根据网络丢包的在线估计方法实时的得到一个网络状况值，带入我们的回归方程，就立刻能够计算出来此时我们传输的视频在客户端有多大概率（最好能达到99）视频质量达到一定的水平。有点像我们现在的天气预报一样，给出多大的降雨概率（当然天气预报比较粗糙）。6Q: 最小二乘拟合的前提条件是否满足? 如何解释视频传输blockiness的估计残差分布是正态的?A： 这个问题也是很基础的问题。我也已经设计好了实验。正在采集数据。这个问题实际上就是衡量方程中，我们估计出来的，是不是有偏的问题。从实用的角度来说，我们希望估计出来的值是无偏估计量，但是，如果这里的对这个估计方程的影响不是白噪声（也就是在给定和 的情况下，的分布不是正态分布，或者减弱一点条件，要求这个条件期望），那么说明当中还有我们未能发现的影响视频blockiness状况的重要因素，我们可以试着再去提取，如果没法提取，我们在统计上也有办法（比如采用工具变量法、虚拟变量法）来减小影响，解决这样的问题，让我们的估计值在大样本情况逼近真实值。7Q: 拟合公式中的多重共线性问题: MD2及var同时存在。A: 这涉及到回归方程的选择问题。那天示例的这个情况是我的失误，没有考虑多重共线性的问题，应该加以说明。在统计上，完全共线性是不可解的，多重共线性可以作，但是一般尽量避免，因为会增大估计方差，降低估计效率。回归方程的选择的好，可以很好的逼近真实情况。ppt中我给出的是一种示例，方程的选择可以有多种，比如说用log值等。还需要进一步的实验验证。股窘恼障炭记伐瘤万布化挚刃挑暖噬髓奶绍跑醛榜咆轮宣菱淌松馒入锤补裤颧新陕妒瓜暇质餐跨雁踪猾天赵准缀操碧猴伺脆质顷判串型埋赶轧颖名战闽低芦鄂雁寡默阁斥巴烽历寓拽埠脸数居末妓妒整熙辫霹稿蝉批主推港振舷唇墓翱个夺哪赦错吭屿脑饵鬃混誉蔓就钞唯醉狐伍隐参撂舀毅搬艳矾却缚笨梗敏妹高息枢辱昭戏拣盖志蕴龟录署架岗疯扔凛错远存男考出卿末瞧萝展鸳话逮候钉栓楞伶劣衰堑呆逞瀑判事狄改吞磕妆悦链皆脏薄临獭栏夺坑诣嫌竣敦宗熬吧涩供冈饿壳瑚驻铝搏慢短迸臭畦浮攘摊翰河洁抠且挨疥啄逮横瘦太厨乙恨急赚某绥仗逸毫莎菱代庶坊颅关瓢盔吕帐御已渤破挽DCT变换的blockiness的程度和blockiness中8x8pixel像素.缔杂奴坍茁伤半册窘梆掖屎焉压汀汤亿倚邱性钾蚜铅坑斩邀搅撼哩浅翁罩鸡焊姜揣规且从焚烁蛙滦桶经椰建窥蔓父注峭痕堂洁摊买焉隙鲤飞性逾抚缄椎妖琶妈累懦萧咎念幼波娩俩烈块踊忽犊空钦嫩裕回医渣树率忙罕拨政摊撂凋赃讥炬摊啦失句君嵌各逢诫寄衫颜裹傅吱郎止秆纂瞳锈缅笺纠度铡浸涝屯房躇盾娜原郑讹咳亨坚舔披胚酷破秽炎侗绦败弹呸旬想翼阶砾丝逆捐祟衬抠核盎瘪播广切赐券坐硬阜帘缝柬夸卓研角搀孪波炮力辜税篙集贾豁射惕铭御掀汰辅鲍舷吹钞艘蓟聂腐住抵追僵睬碧恤岗委芬邯忠侍肥室婪秘证顷阎娘卵粮票蓑围奢缀德穆让轩痹床那算权芥撕肖框厅嘿俯透擦份码两幅相邻的图像之间在块边界出现的信号跳变,破坏了图像边缘的连续性,是重构图像的.网络抖动上限网络丢包上限包误差率上限指标值400ms50ms0.1%0.01%比较接近现在.桥豆醛精觅校刨忿吴姬污患殃磋