视频信号数字化处理后所带来的信号损伤的种类及特点 2023

第页共页视频信号数字化处理后所带来的信号损伤的种类及特点2023视频信号数字化处理后所带来的信号损伤的种类及特点2023论效劳器群集技术及应用1、前言播送设备、有线电视前端、卫星传输效劳，以及许多公司和业界通信实体，正在越来越多地依赖于视频媒体文件效劳器，以不断拓宽效劳种类。然而，我们在享受这些先进技术带给我们实惠的同时，又不得不面对这样一个事实：电子设备出现故障是不可防止的，视频效劳器也不例外。如今，很多电视台已经使用非线性节目制作系统制或硬盘播出系统。无论使用哪种系统，效劳器在整个网络系统的重要性是不言而喻，效劳器作为整个网络的心脏，要为网络上所有的用户提供数据共享和应用效劳，假如不能保障效劳器的正常运行，网络系统的可用性就无从谈起。所以，要确保视频网络中的关键业务应用运行平稳，具有可靠的适时性和连续性，通过效劳器的群集技术来进步系统的可用性和可扩展性是目前备受推崇的方案。2、效劳器群集技术概述群集系统是一种由一组互连的整机构成的并行或分布系统，可作为统一的计算资使用。效劳器群集技术使用多台效劳器组成效劳器集合，可以提供相当高性能的不停机效劳。在这个构造中，每台效劳器都分担着一局部计算任务，由于集合了多台效劳器的性能，整体的计算实力被增加了。与此同时，每台效劳器还承当一些容错任务，当其中一台效劳器出现故障时，系统会在软件的支持下将这台效劳器从系统中隔离出去，通过各效劳器之间的负载转嫁机制完成新的负载分担，同时向系统管理人员发出警报。再者，在某个应用软件的峰值处理期间内，对该应用的需求会变得过高，那么使用简单的操作命令就可以把同一节点的应用包转移到其他节点从而减轻该节点的工作负荷，来满足已增加的需求。群集系统就是通过功能整合和故障过渡实现了系统的高可用性和可靠性。效劳器群集技术提供了高度的可用性、伸缩性与易管理性：·高度的可用性：群集被设计具有防止单点故障发生的才能。应用程序可以跨计算机进展分配，以实现并行运算与故障恢复，并提供更高的可用性。·可伸缩性：参加更多的处理器或计算机进步群集的计算才能。当现有效劳器才能有限时，可以通过增加CPU、内存、甚至一台或几台效劳器来扩展系统的才能。在效劳器群集技术出现之前，用户通过增加CPU、内存来进展扩展，但是CPU、内存的扩展只能在一台效劳器上进展，因此扩展是有极限的。而效劳器群集技术可以通过在现有系统上增加效劳器来进展扩展，增加的效劳器将与原有的效劳器严密地集成在一起，为客户端提供高性能的应用效劳。·易管理性：群集以单一系统映射的形式来面向最终用户、应用程序及网络，同时，也为管理员提供单一的控制点，而这种单一控制点那么可能是远程的。效劳器群集技术的实现可以有几种不同的方式，考虑到用户的需求，大体可以分为以高可用性为主要目的的高可用性方案，和以进步性能为主要目的、同时亦可以提供高可用性的方案。这种划分同时也反映出群集技术在PCServer上开展的两个阶段，既高可用性的两节点群集和进步性能的多节点群集。在今后PCServer群集开展的方案中将要实现更多节点的具有更高扩展才能的群集方案，这样在提供高可用性和高性能的同时，还可以通过节点数目的扩展，更加有效的保护客户的投资。3、效劳器高可用性群集拓扑构造有两种典型的拓扑构造可以实现高可用性：被动备份效劳器和第二活动效劳器。我们将详细讨论第二活动效劳器的三种实现形式："全部复制"、"0共享"和"全部共享"。下表总结了本文讨论的几种面向可用性的群集方法的优点和局限性。3.1被动备份效劳器通常把一个效劳器安排为"主"效劳器，另一个效劳器为"第二"效劳器；由主效劳器为用户提供文件、打印及应用效劳，"第二"效劳器只有在主效劳器发生故障时才能投入运行，代替主效劳器提供效劳。在被动备份效劳器方式下〔如图3所示〕,除非主效劳器发生故障，否那么第二效劳器只是"观察"并不作任何运作。一种被称为"心跳"的简单机制被配置在主效劳器上，它的作用是周期性地发送主效劳器"生命尚在"的消息给备份效劳器，一旦消息停顿，备份效劳器就认为主效劳器发生故障，并把自己投入运行以代替主效劳器。"心跳"是一种很容易开发的协议，它可以通过网络链接实现；也可以仅仅在效劳器间加一条传递"生命"消息的缆线；或者通过局域网消息传送实现。3.2活动第二效劳器一个功能根本一致但本钱低得多的方式是使第二效劳器可以处理其它的应用程序，但当主效劳器发生故障时，第二效劳器也可以接收主效劳器的工作。这种我们称只为"活动第二效劳器"方法。这种方法的主要优点是在保持使用第二效劳器的同时，获得效劳器冗余，而不是仅仅把第二效劳器作为备份使用。这种方法可以减少群集系统的运行费用。实际使用中，"活动第二效劳器"方法有三种实现方式。"全部复制""全部复制"就是指彻底的效劳器冗余。每个效劳器都有自己的磁盘。数据不断地被拷贝到第二效劳器的磁盘上，以保证故障发生时，第二效劳器可以使用已被拷贝的当前数据，并基于此当前数据作连续运转。尽管这种方法确实可以带来高可用性，但它增加了效劳器及网络的负荷，可能会严重影响系统性能。另一个缺点是当一个效劳器发生故障时，可能会有主、从效劳器的不一致现象：某个磁盘上的事务处理可能并没有完全在另一个磁盘上得到继续。因为即便以最快的网络相连，两个效劳器间信息传送仍会有一定的延迟。冗余的效劳器也带来许多好处。因为数据是被完全复制的，所以客户的应用程序可以在任一效劳器上运行，从而可以更好地平衡负载。另外，节点在空间上可以是分散的；节点间可通过广域网互连，物理上可以间隔很远。这种拓扑构造常被用在灾难恢复设计中，提供对主要自然灾害如地震、洪水等的保护。"0共享"活动第二效劳器方法的另一个实现是"0共享"。是指两个效劳器物理上连接到同一个磁盘组上，尽管其中每个效劳器"拥有"自己的磁盘。这在正常运作下，只有磁盘的主人才能存取其中的数据；但当某个效劳器发生故障时，一个替代效劳器将把自己设定为原来属于发生了故障的效劳器的磁盘的主人，并对之进展操作。〔如图3-3所示〕这种方式不必不停地在效劳器间拷贝数据，从而大大降低了网络负荷。在这种方式下，磁盘是唯一可能产生导致长时间停机的故障的地方。于是，在这种体系构造的安装中，系统或是典型地依赖冗余镜像磁盘，或者在磁盘子系统中用RAID技术，以保证在效劳器或磁盘出错时，应用程序和数据的可用性。"全部共享"最后，我们还可以"共享一切"，也就是说让多个效劳器在同一时间共享同一磁盘。〔参见图3-4〕。在这种方式中，所有与磁盘相连的效劳器在正常运作时可在一样时刻共享磁盘存取通道。这种方式要求开发一个复杂的锁定管理软件，保证在一个时刻只有一个效劳器在读写数据?;共享一切"方法也典型地依赖磁盘镜像和RAID磁盘。4、效劳器群集技术的实现方案效劳器系统用户根据本身业务的情况及组建群集系统的支付才能的不同，对效劳器高可用性有一系列要求，如下表所示，不同的可用性等级带来不同的效果。许多公司根据用户的不同需求，制定了许多种效劳器高可用性群集方案。下面，我们就分别以IBM公司和HP公司的产品来举例说明。4.1IBM公司的效劳器高可用性群集方案以下以IBM产品为例，分别以通过磁盘镜像和共享存储设备为例；来阐述效劳器高可用性群集系统的原理与实现方法。在探究每一种方案的细节之前，让我们首先看看它们的工作原理。如图4-1所示，两个效劳器的节点互相连接，构成了一个提供效劳的整体。当客户端提出访问恳求的时候，这个恳求可以被群集响应。当群集中的一个节点失效，另外一个可以通过"失效切换"的过程接替失效节点上运行的应用程序。同时，由于应用程序和客户端所需要的数据是存储在共享的存储设备中的，在"失效切换"的过程中共享存储的访问控制权也由失效节点切换至运行节点上，客户端和应用程序可以通过共享存储设备继续访问必要的数据。这样，通过群集，可以实如今一个效劳器节点失效的情况下，仍然可以提供数据访问和网络效劳的正常运行，保证了客户的关键业务的运行。4.1.1采用数据镜像方式的高可用性群集解决方案采用数据镜像方式的群集方案是在两台效劳器之间通过磁盘或者分区的镜像，保证应用程序的代码和数据可以在两台效劳器之间互相备份，从而保证系统的高可用性。◆磁盘镜像实现方案·系统要求：2台IBMfinity效劳器一组用于内部连接的网卡一组用于客户端效劳的网卡每台效劳器分别拥有一个"本地硬盘"每台效劳器分别拥有一个或多个"高可用性"硬盘每台效劳器分别拥有一个或多个"输出的"本地硬盘VincaCo-Standby高可用性软件·工作方式及特点：图4-2是磁盘镜像的工作原理示意图。图中左边的效劳器〔NodeA〕和右边的效劳〔NodeB〕分别运行不同的效劳。两台效劳器通过内部的高速网络连接在一起。图中〔内部高速互连〕是内部专用网段，用于传输两台效劳器之间的镜像数据。两台效劳器中各自拥有一个本地盘，本地盘是用于安装效劳器的操作系统。在两台效劳器中除本地盘外，还有一个"高可用盘"，"高可用盘"是用于存储用户的数据或者是高可用应用程序的代码。两台效劳器中另外各有一个"输出盘"，"输出盘"是用于镜像另一台效劳器中的"高可用盘"的一组硬盘。在两台效劳器之间，通过内部的.高速网络连接?;高可用盘"和"输出盘"形成了一组镜像的"镜像盘"。这样在一台效劳器中所有的用户数据都可以通过这一组"镜像盘"镜像到另一台效劳器的"输出盘"中，网络客户端对于一台效劳器的任何数据的改动都可以实时的复制到另一台效劳器的"输出盘"中。图中〔Clientwork〕是网络客户端用于访问效劳器的网段。在正常工作的状态下，客户端网络通过一台效劳器访问数据，效劳器通过客户端网络向外提供效劳。当效劳器失效的时候，另一台效劳器就会接收这台效劳器的任务。由于所有的用户数据通过前面所提到的内部高速网络，镜像在另一台效劳器中的"输出盘"，这时网络客户端可以通过备份效劳器继续访问这些数据。网络效劳在经过了短暂的停顿之后，又可以恢复了。◆分区镜像实现方案采用分区镜像在采用镜像方式的高可用性方案中也很广泛。分区镜像和磁盘镜像方式的一个区别是，分区镜像可以采用更少的硬盘数目，减少本钱。·系统要求：双节点IBMfinity效劳器节点各自的系统分区节点各自的高可用分区〔互为镜像〕内部高速连接客户端网络串行连接〔心跳线〕·工作方式及特点：图4-3，是分区镜像的原理示意图。图中左边的效劳器〔NodeA〕和右边的效劳器〔NodeB〕分别运行不同的效劳。两台效劳器通过内部的高速网络连接在一起。图中〔内部高速互连〕是内部专用网段，用于传输两台效劳器之间的镜像数据。两台效劳器中各自拥有一个系统分区，系统分区是用于安装效劳器的操作系统。在两台效劳器中除系统分区外，还有一个"高可用分区"，"高可用分区"是用于存储用户的数据或者是高可用应用程序的代码。两台效劳器中的"高可用盘"互相镜像。在两台效劳器之间，通过内部的高速网络连接，传输镜像的数据。这样在一台效劳器中所有的用户数据都可以通过这一组"镜像分区"，网络客户端对于一台效劳器的任何数据的改动都可以实时的复制到另一台效劳器的"输出分区"中。总之，通过磁盘镜像的方法虽然可以大大降低硬件费用，但只限于两台效劳器间的互相备份，并且占用CPU,I/O口资,对系统的性能影响较大,不适于承当较重任务的系统。4.2采用共享存储设备的高可用性群集解决方案·系统要求：两台finity效劳器MSWindowsNT企业版共享的磁盘存储设备EXP15ServeRAID阵列控制卡内部连接网络客户端效劳网络其他附件·工作方式及特点：这种群集方式的实现，是通过两台效劳器共享一个外部的磁盘存储设备，所有要求高可用的数据和应用程序代码存储在共享的设备中，两台效劳器分别对磁盘存储设备具有访问权。当一个效劳器发生失效的时候，另外一个效劳器仍然可以对共享存储设备中的数据进展访问，客户端网络的访问，可以由这台效劳器继续维持。IBMServerRAID3H群集方案，支持MSCS〔MicrosoftClusterServer〕。目前MSCS可以支持两个节点。节点A和节点B分别是两台一样配置的IBMPCServer或finity效劳器，通过MSCS逻辑上生成一个虚拟的效劳器，通过这个虚拟的逻辑效劳器向外提供网络效劳。图中的两台效劳器分别具有一个本地盘用于安装WindowsNT操作系统。效劳器中分别安装由两块网卡，其中一组网卡用于网络效劳的提供〔图中客户端网络网段〕，另一组网卡通过一条心跳网线构成了一个内部互连的高速网络，这个高速网络是用于两台效劳器之间的信息传递。在效劳器中分别安装一个或多个ServerRAID3H控制卡，通过ServerRAID3H可以实现效劳器的内部和外部的阵列，同时通过该控制卡连接共享的存储设备〔图中所示的共享SCSI总线〕。所有要求维护高可用性的数据和应用程序代码都存储在共享的存储设备中，这也是该方案的关键局部。效劳器中的ServerRAID3H的第三个通道互相连接在一起构成SCSI内部互连，这个连接是用于两台效劳器之间阵列信息的同步。IBM基于ServerRAID3H的群集方案，可以支持节点级和资级的保护。·节点级保护：在任何时候，假如一个效劳器失效，在这个效劳器上运行的所有应用程序和网络效劳都会在另外一台效劳器上重新启动，共享存储设备的控制权从失效的效劳器上转移到运行的效劳器。运行的效劳器可以继续支持群集的虚拟效劳器，通过群集的虚拟效劳器，用户的网络访问可以继续进展。从而实现节点的保护。·资级保护：假如一个效劳器所运行的某个进程发生失效，该失效的进程会通过群集监视器被检测到，之后通过群集效劳在另一台效劳器上重新启动，通过虚拟的效劳器继续向外提供效劳。对于原效劳器上所运行的其他进程和效劳不会受到失效进程的影响。另外，IBM公司还提供共享SSA存储设备方案和共享共享光纤通道〔FibreChannel〕存储设备方案。通过SCSI接口共享外部存储设备，这种方案虽然增加了外设费用，但是由于采用该方案,可以实现双机的监控管理,而对系统性能影响很小，极大的进步了系统的可用性及可扩展性。5、HPServer"超级保障"高可用性解决方案在前面提到的IBM公司的磁盘镜像和共享外部存储设备两种效劳器群集高可用性解决方案中，我们可以看出这两种解决方案使效劳器的可用性等级到达高可用性等级，即正常运行时间为99.9%，宕机时间为8.5小时/年。有些人要说这种解决方案还是不能满足要求，确实，在电视台普遍采用硬盘播出的今天，人们希望的看到的是效劳器永不宕机。如今，人们又在追求所谓"五个9"的正常运行时间〔99.999%的在线正常运行时间〕，这是一个非常高程度的可靠性和保护。这类性能稍高于每年315秒的停机时间，或者用销售/交易的行话来说，"一年丧失的30秒的广告不超过10个。"为此，惠普公司率先在推出?;超级保障"解决方案，使得99.999％的高可用性指日可待。惠普公司在双机双控容错解决方案的根底上，提出的"超级保障"解决方案可用性极高，每年只有5分钟的方案外停机时间，正常运行时间达99.999%，比双机系统进步100倍。同时，这种"超级保障"高可用性方案并没有对相关软件、硬件提出更高的要求，它只需要标准的hpserver、标准的MicrosoftWindowsNtServer以及不需修改的"off－the－shell"应用程序，如MicrosoftExchange等，因此用户不必去购置专有的网络操作系统、中间件及应用。系统由四台效劳器组成，每两台构成一个单元，如图5-1所示。图中左边为单元1，右边为单元2，两边完全对称。每个单元中的两台效劳器通过高速的PCI接口和光纤相连，Marathon接口卡〔MIC〕可以驱动两台效劳器之间发送和接收数据，组成了一个完好的系统单元。其中一台效劳器称为计算单元〔ComputeElement，CE〕,它运行用户所有的应用程序；另一台称为输入/输出处理器〔I/OProcessor，IOP〕，它进展所有的输入/输出处理。所有的输入/输出恳求都是由计算单元〔CE〕转到输入/输出处理器进展处理，而CE不进展任何输入/输出处理。IOP上运行E4000软件，完成故障处理、磁盘镜像、系统管理和再同步工作。两个单元之间通过光纤和MIC卡互相连接。两台CE运行Marathon专利同步技术和执行应用程序。磁盘镜像是通过两边的IOP重复写磁盘实现RAID1，因此不需要专门的RAID控制器。当一台CE发生故障时，另一台CE马上在配置中移去故障的CE，并保持系统继续运行。故障的CE然后被物理上移走，修复，再连接，最后开机。这台CE使用高速连接的线路，通过同步另一台CE的状态而重新参加系统中。此外，当一台IOP发生故障时，另一台IOP能保持系统继续运行。故障的IOP然后被物理上移走，修复，再连接，最后开机。在E4000软件开场运行后，修复的IOP自动被参加系统。◆硬件组成：◆软件特点：Marathon管理器是本系统的管理软件。它是一个可以使你监视和管理系统的标准WindowsNT应用程序，具有标准的图形化界面的Marathon管理器主要可以实现以下功能：·显示系统及其各个部件的状态，包括计算单元、输入/输出处理器、互连、键盘、鼠标、以太网连接等；·发布管理系统及其各个部件的命令，包括启用或禁用系统部件；·获取系统的统计信息，包括以太网计数器；·确定镜像磁盘组的状态；·可以启动Marathon配置工具和WindowsNT管理工具；·使用网络连接或微软远程访问效劳器〔RAS〕可以通过一个远程工作站管理系统。6、构建群集系统的原那么6.1群集与管理所有关于群集的讨论必须包含对系统及管理网络的考虑。资需求大，运行关键任务的企业级环境对群集很感兴趣，比方电视行业。因为它们不能承当意外停机造成的损失。效劳器群集非常复杂，而复杂的技术又往往会引入许多人为的错误，因此系统应有网络资管理、系统监测管理，并具有可以简化管理过程的工具。把群集仅仅视为单一系统或把它仅仅视为分立的效劳器，持这两种观点的系统和网络管理软件是不能胜任工作的。对效劳器群集的有效管理需要集成上述两种观点，当我们观察群集上运行的一个应用程序时，需要单一系统观点；另一方面，当我们试图区分、定位一个出错部件时，又需要分立效劳器观点。假如管理系统不能提供必须的监测及管理才能，那么效劳器群集是不能在重要的应用环境中投入使用的。6.2群集与本钱我们知道，并不是所有的效劳器安装都需要或能支付得起群集提供的系统级冗余。因此我们需要比照一下是系统发生故障所造成的损失大，还是购置及管理一个群集系统的费用高，使配置从群集中获益。图6-1:效劳器群集可用性等级效劳器系统用户对可用性有一系列要求：从最根本的每个效劳器系统都具有一定级别的品质和可靠性，到最高级别具有容错才能，即在任何情况下，效劳器都能连续操作。〔如图6-1所示〕当一个