汕头市广播电视台播出存储及媒资管理系统.doc

汕头市广播电视台播出存储及媒资管理系统技术建议书2010年9月汕头市广播电视台播出存储及媒资管理系统技术建议书 目 录第1章系统整体方案设计5第1节总述5第2节建设原则6第3节业务流程设计71.3.1节目资料整理71.3.2电视剧等外购节目入库12第4节数据流程设计13第5节网络架构选择14第6节系统主要参数191.6.1站点配置说明191.6.2系统编解码格式参数191.6.3系统带宽参数计算201.6.4存储容量选择201.6.5硬件交换设备端口配置21第7节组成模块主要功能21第8节系统主要设备24第2章服务器系统设计25第1节MDS服务器设计25第2节数据库服务器设计25第3节Web应用服务器设计26第4节网络安全措施262.4.1系统硬件的安全性262.4.2网络系统软件平台的安全性272.4.3应用软件的安全性27第3章应用系统设计28第1节采集整理子系统28第2节下载输出子系统29第3节编目工作站29第4节检索工作站31第5节收录子系统31第6节内容管理子系统32第7节工作流子系统32第8节运行管理子系统32第9节存储迁移服务器33第4章软件技术实现34第1节归档存储管理软件34第2节自动技审软件35第3节媒资上下载软件35第4节编目软件36第5节检索软件37第6节管理软件37第7节节目编排软件38第5章大洋D3MAM典型用户案例介绍39第1节生产服务型：CCTV新址媒资系统39第2节多级交互型：北京广电媒资交换系统40第3节增值服务型：江苏省台媒资管理系统41第4节异构整合型：杭州电视台媒资系统42第5节其它用户案例列表43第6章结束语45第1章 系统整体方案设计第1节 总述本设计说明系统方案的设计思路，从系统的业务流程分析开始，深入到数据流程，从而产出系统的网络架构，最后分析系统的主要参数和各个模块的软件功能。为适应电视广播电视业发展的需要，保护和利用历史视音频资料，解决普通录像磁带的老化问题，改进电视编辑、播出流程，提高工作效率，提升汕头市广播电视台节目制作质量和档次，将建设播出存储及媒体资产管理系统。提供规模为400槽位Quantum I6000 LTO4数据流磁带库2台，上下载工作站（高标清兼容）20台，查询工作站6台（其中2台带电视节目播出单编排软件），新闻文稿系统20台。系统实现汕头电视台媒体资产管理，对台内自制历史节目实现磁带库转存储、详细编目、查询、web网站转码发布。存储设备用于外购电视剧的存储，新闻共享媒资。同时系统具备电视节目播出单的编排、节目的迁移、电视新闻、专题素材的保存、查询、利用，并做到播出带的上载、审核、迁移。方便新闻、专题文稿的建立、修改、审批、存档、查询，新闻一并与视音频媒体资料一并归档到总编媒资。收录系统规模为12个AV通道（模拟/SDI）。用于外来节目和各区县电视台节目的接收、暂存、粗编、下载。同时为实现以上系统功能配置了相关服务器、UPS设备、网络设备、安装、软件设计（包括媒资与播出系统、新闻非编的接口软件，电视节目播出单的编排软件等）。第2节 建设原则汕头市广播电视台播出存储及媒资系统的总体设计满足以下要求：具有安全可靠性:整个系统有高可靠性和安全性的保证，在系统设计中考虑了完善的应急方案。在设备选型上选择同类设备中性能优良，并经客户使用达到高标准、高质量、性能稳定的产品。在操作上做到简单方便、安全可靠。设备有良好的环保性能、抗电磁干扰性能。设计时充分考虑系统各个部分、系统各级之间的冗余备份措施，选择的设备必须达到广播级要求。 具有容错性系统具有检错、纠错能力，具有完善的备份措施。在系统出现故障时，能够在较短的时间内恢复系统运行。3. 具有科学性、先进性整个系统设计科学先进，系统设计和设备规格应符合数字电视广播规范，要采用世界先进、国内外成熟的技术。 4. 具备升级扩展能力根据电视工艺流程特点，结合实际需要，保证系统功能齐全、结构清晰、扩展灵活。本系统除提供基于媒资平台的标准功能应用外，还充分考虑到系统在全台中所处位置，将基于汕头市广播电视台的特性流程和功能应用同其他子系统有机的融合，并保持整体结构的完整性。5. 易于操作管理、维护整个媒资系统主要用于汕头电视台素材和成品节目等视音频资料的归档存储和再利用，系统易于操作，应急快速，便于管理，维护方便。6. 具备经济性对系统进行统筹规划，设备具有最佳的性能价格比。7. 具有开放性投标方所提供的应用软硬件具有开放性，当招标方需进行系统升级和二次开发时，大洋可提供相应技术支持，如开放相应的接口协议，数据格式等。第3节 业务流程设计汕头电视台媒资系统实现的业务包括：传统磁带数字化、其他系统节目数据归档、节目调用、电视剧节目入库等。1.3.1 节目资料整理包括传统磁带数字化、外部系统节目数据归档到媒资、节目资料调用，我们将逐一对比说明。 传统磁带数字化传统磁带数字化业务是将汕头电视台目前存储的传统磁带进行数字化上载、编目实现数据化存储。流程见下图：1.传统库房整理出需要数字化存储的传统磁带，由上载人员领取。为便于管理，整理磁带时应对磁带进行分类，保证在一段时间内数字化某一类别的磁带。2.待上载的磁带首先进行预处理工作包括：扫描输入磁带条码，导入已有磁带信息包括：节目名称、节目类别，定出上载入出点。磁带预处理工作主要是建立上载任务，由于汕头电视台需要数字化的磁带较多，通过预处理环节集中建立赏载任务，可以有效降低上载时的人工操作时间提高上载效率。预处理的传统磁带应该实现条码管理，这一点需要台里配合。3.预处理的磁带通过上载工作站进行数字化，为提高上载效率上载时同时生成高低两种码率数据，根据台里规划高码率为MPEG2 I帧50m，低码率为WMV。4.上载后的节目可能需要进行简单编辑处理。5.上载后的节目需要进行质量审核保证存储的视音频质量，审核时系统即可以自动监测出节目的黑场、长静帧、蓝场的镜头，也可以让审核人员浏览高码率节目进行主观审核。审核不通过的节目可以通知重新采集，如果判断是原始磁带的问题则将磁带退回传统库房处理。上载审核通过的节目磁带也退回传统库房。6.上载审核通过节目，高码率会自动归档到近线存储中，低码率节目会被编目人员通过编目软件进行浏览编目。编目的主要目的是通过对节目著录描述信息，使节目这种非结构化数据便于管理、检索、调用。编目时允许编目人员根据需要对节目的片段、场景、镜头等不同层次进行编目。7.编目数据做为数字化节目的组成部分，存储前同样需要质量审核。编目质量审核可以根据需要设置1级到多级审核。审核不通过的编目数据需要重新编目，审核通过的编目数据可以发布供其他系统进行检索查询。 外部系统节目归档外部系统节目归档涉及的业务包括：收录、新闻、制作系统制作的成品节目归档；播出的节目归档；收录的节目归档；新闻、制作系统的珍贵素材归档。1.外部系统通过客户端或管理工作站向媒资提交归档请求，媒资系统接到请求后要确认节目是否符合入库条件，符合入库条件的节目信息会通知媒资的节目传输系统。2.媒资的节目传输系统根据待入库节目信息，访问外系统的相应存储区，读取数据写入媒资，传输完成后通知外系统。3.为保证入库的节目、素材质量，要对传输的节目数据进行浏览审核，对不合格的节目要打回，并通知外系统。成品节目归档前建议有提供方进行技审，媒资的质量审核主要针对素材类节目可以采用抽查方式。4.为降低外系统的转码压力和传输压力，建议外系统归档到媒资的节目数据都是高码率数据，媒资审核通过后由媒资自己转码成低码率数据用于编目等业务。5.转码后高码率数据自动归档到近线存储中低码率节目会被编目人员通过编目软件进行浏览编目。编目的主要目的是通过对节目著录描述信息，使节目这种非结构化数据便于管理、检索、调用。编目时允许编目人员根据需要对节目的片段、场景、镜头等不同层次进行编目。编目人员可以成品节目和素材类资料进行不同的编目信息著录。6.编目数据做为数字化节目的组成部分，存储前同样需要质量审核。编目质量审核可以根据需要设置1级到多级审核。审核不通过的编目数据需要重新编目，审核通过的编目数据可以发布供其他系统进行检索查询。 节目调用流程节目调用流程涉及的业务为外系统从媒资系统获取节目资料的过程。1.外系统通过媒资系统提供的B/S检索界面，检索媒资库中节目资料，发出资料调用请求。2.媒资系统接收到调用请求，首先确认节目申请人是否符合节目调用条件，对于一般性节目调用系统自动开始进行节目输出准备处理。对于以下申请如：节目重要级别很高，申请人调用非本部门所有的资料，系统将通知申请人进行人工确认，这时系统可以打印出资料申请单由申请人去找相关领导签字。申请人取得签字后，交给媒资系统管理员人工启动系统进行节目输出处理。3.节目输出时媒资系统会将节目数据准备到输出缓存区，这时系统可以通知申请人所在系统来读取该节目数据。系统也应该提供磁带下载服务，下载用空白介质由申请人提供。业务名称现有模式新模式比较成品节目入库栏目提供磁带，总编室资料科接收、上架成片节目以存储高码率和检索低码率两种格式文件入媒资库，总编室可以进行编目处理编目增加一定工作量（编目复杂程度可自行掌握），但利于节目管理、检索、备播。没有人工交接过程素材节目入库栏目提供磁带，总编室资料科接收、上架素材以存储高码率和检索低码率两种格式文件形式入媒资库，素材入库请求总编室需要进行审核，文件入库后进行编目处理。编目增加一定工作量（编目复杂程度可自行掌握），但利于节目管理、检索、再利用。没有人工交接过程现有节目资料整理防止粘连、定期进行倒带、节目复制需要对现有磁带进行数字化上载、编目，以后不再需要倒带等工作现有资料上载、编目是比较大的工作量，但是必须的，为提高上载效率可提前整理出现有资料哪些需要数字化处理节目资料借还需要到资料科办理查询、借用手续、需要复制节目带通过网络检索获取媒资库的资料信息，在网上发出调用请求，总编室可以对请求进行审核也可以让系统自动确认，资料通过网络传输给业务系统（台内想法要审核）没有资料磁带借还的流程节目提供给播出将所有节目磁带备好，用推车送到播出由播出再进行上载需1：1的时间通过网络将节目文件传输到播出系统提高节目送播效率，减少人为失误节目播出后磁带需要退回总编室播后文件可以在播出系统存储一段时间，用于短期内重播不需要磁带退库重播审片需要重新从库房领取磁带审查在网上进行审片和修改1.3.2 电视剧等外购节目入库媒资系统负责外购节目的入库管理。业务名称现在模式新模式比较电视剧节目接收接收节目商的磁带采用集中上载方式，接收磁带后，进行磁带上载采成播出用文件，同时大屏监看增加上载环节，但节省了播出上载的工作如果节目商提供的是信号，下载成磁带通过收录中心直接采成播出用文件总编室只需向收录中心提出收录申请电视剧审查利用录像机播放磁带，在监视器上摄片在上载审核工作上审看及粗编工作不占用录像机电视剧镜头修改利用对编机在上载审核工作上编辑节省对编机电视剧入库填写磁带信息，磁带入磁带库播出格式文件、检索码率文件入媒资库，需要对电视剧节目进行编目编目增加一定工作量（编目复杂程度可自行掌握），但利于节目管理和检索1.总编室节目购销外购的节目可以通过收录和磁带方式获得，磁带送交媒资做数字化集中上载，同时大屏监看，收录的外购节目通过收录中心收录再通过网络传输给媒资。2.媒资可以对电视剧节目进行浏览、剪辑去除不合适的镜头，合成出最终版节目。3.终版节目通过转码生成低码率数据用于编目、发布（与前面流程一致）4.转码后高码率数据自动归档到近线存储中第4节 数据流程设计汕头电视台媒资子系统中，数据流程如下：素材上载之后，根据上节描述的业务流程，媒体数据经过审核、编目、归档后，经流媒体服务器发布。经在线盘阵流媒体服务器。归档后的媒体数据，根据设定的存储策略，到达一定水位线之后，被迁移到带库中去。经在线盘阵近线迁移服务器带库。当外系统要调用媒资系统素材的时候，媒体文件经带库在线盘阵接口服务器主干网EMB服务器素材的各种元数据信息审核、编目、归档后，经流媒体服务器发布。元数据经上载工作站审核工作站编目工作站归档工作站流媒体服务器。当其他应用子系统要和媒资系统进行数据交换的时候，元数据经数据库服务器接口服务器主干网ESB服务器。第5节 网络架构选择媒资业务子系统由系统核心服务器、光纤交换机、以太交换机、媒资高标清上下载工作站点、编目检索工作站、高标清收录服务器、文稿工作站及其他系统设备组成。其中核心服务器区包括数据库及MDS服务器、EMB服务器、转码服务器、ESB服务器、媒资及文稿Web应用服务器、存储迁移服务器等组成。具体如下图所示：汕头电视台媒资系统的主要功能要实现传统磁带数字化、其他系统节目数据归档、节目调用、电视剧节目入库、总编室业务、节目收录、文稿编辑任务等功能。根据对媒资系统的理解和要求，本次方案设计中媒资系统做为整个系统的数据存储中心，所以在设计的时候同时将媒资系统建设成为全台的数据存储中心，全台主要制作业务网络都采用多码流格式混编的技术进行设计，所以各个业务系统内自身对转码的需求较少，同时每个业务网络根据实际使用情况，设定50mbps为主编辑码流，所以业务网络内不做转码系统的设计。但是做为全台的数据存储中心，要尽量保持格式统一，便于系统的管理，所以媒资系统在设计上的时候将所有的节目素材在媒资系统入口统一转换成两种格式，一种是自制节目采用50mbps进行归档保存，另一种是外购直接用于播出的节目，直接采用播出的格式进行归档保存；而从媒资系统往制作业务系统回调的时候，统一转码成50mbps的格式提供给制作业务系统使用，从媒资系统往播出系统调用的时候，统一转码成较低的码率提供给播出系统使用。由于自制节目存储主要用于音像资料的存储和再利用，需要提供精确和细致的检索信息，所以在归档的格式和编目的详尽程度上要求较高；而外购节目由于主要用于播出，相对而言检索需要的信息较少。所以在系统的设计上，根据两类节目的存储和编目特点不同，在编目上建立两种系统的编目模式，一种模式用于自制节目的归档存储，编目信息可以根据需求细化到节目层、场景层、镜头层、关键帧等多个层面；对于外购节目，主要可以精确到节目层。在项目的分级存储上，采用带库分区的方式进行分级存储归档，至少分成两个区进行归档，一个区用于自制节目归档，一个区用于外购节目归档。采用带库分区的模式，可以使每盘磁带存储的节目相对统一，那么在后期重新利用的时候便于节目的调用，例如存储的时候电视剧全部保存在一盘数据流磁带上，那么后期带库调用的时候只需调用一盘磁带，就可以读取所有的电视剧，而不需调用多盘磁带，便于系统的整体性能的提升。同时媒资系统还提供资源检索模块，开放给其他业务系统，当其他业务系统需要调用媒资系统的资源时，直接浏览资源检索模块，通过迁移的方式获取素材资源。同时资源检索模块也同时同步给全台统一的资源检索调度中心，实现全台统一的数据检索与调度。系统在设计的时候，充分考虑了系统的安全性，所有的关键核心服务器全部采用主备冗余的设计模式，同时每台核心服务器在配置的时候系统盘和数据盘也全部采用冗余配置，多重冗余配置保证系统关键服务器的顺利运行，从而保证整个业务子系统的顺利运行。另外系统配置的中心存储体也是采用双控制器的设计模式，同时磁盘内部按Raid方式进行数据校验与数据保护，配置了相应的校验盘和热备盘。近线存储体也是采用两台磁带库，和2个驱动器的模式，可以保证在损坏1台的情况下系统可以正常运行。系统按在全台统一规划和设计的前提和原则下，对媒资业务子系统进行设计，媒资子系统在实现本系统的业务后，通过系统设计的互连接口，与全台其他业务系统实现连接。在媒资子系统建设完成后，可以实现汕头电视台建设以媒资为数据存储中心的新型业务平台构建，在媒资实现全台资料的归档保存和整理，实现全台从新闻、制作、收录到媒资的数据快速归档保存，并及时提供给播出系统用于节目的正常顺利播出，实现全台无带化和数字化的建设。架构选择：系统采用FC+以太网的双网结构设计。FC+以太网的结构是目前视音频网络中应用最为广泛的一种技术，其中FC网用于大数据量视音频文件的端到端传输，以太网用于控制信息的传递。在系统需要高带宽的大型网络设计中，FCSAN的双网接口更有利于系统的稳定运行。存储管理软件选择：目前市面上的存储管理软件较多，主要可选择的产品为Quantum公司的Stornext存储共享管理软件和IBM公司的SANergy两种产品，本次方案我们推荐Stornext存储共享管理软件，原因如下：StorNext 包含两大核心软件组件：StorNext File System 和 StorNext Storage Manager。StorNext File System 可以让 UNIX、Linux、Windows 和/或 Macintosh 操作系统中运行的应用程序并行访问同一文件存储区，实现轻松文件共享和投资保护。其开放式架构拥有极强的扩展能力，允许基于 SAN 和 LAN 的客户端进行数据共享。StorNext 对存储厂商没有任何限制，用户可以采用任意的磁盘和磁带组合。StorNext Storage Manager 则能根据用户定义的策略和文件访问要求在不同的存储层之间自动移转数据。与分布式数据迁移服务器( DDM) 配合使用，将是大型存储环境的理想之选。此外，由于其可以与 StorNext 文件系统的虚拟化功能集成，因此无论文件是存储在本地还是异地，客户端应用程序都可以访问。对于还不熟悉 StorNext 的用户，可以把客户端节点转换成“数据移转”节点。这些节点可作为整个层级薄弱环节的文件系统网关，让您独立地扩展性能和容量。StorNext FS和SANergy产品比较比较项目StorNext FSSANergy备注产品本质独立的、跨平台SAN文件系统SAN文件系统外壳程序1. StorNext FS是完全为SAN网络环境设计的文件系统，不依赖于任何现有操作系统中附带的文件系统。2. SANergy不是一个独立的文件系统，它基于现有文件系统处理硬件，所以它只是一个SAN文件系统外壳软件。MetaData传输效率Metadata传输占用LAN带宽低，占用MDS主机资源少，可以支持大量主机并发访问Metadata传输占用LAN带宽高，占用MDS主机资源多，不能支持大量主机并发访问1. StorNext FS直接通过TCP/IP协议传输Metadata，MDS采用优化算法处理Metadata，因此传输和处理效率非常高，可以满足大量主机在高负载环境下并行工作的要求2. SANergy使用NFS/CIFS文件传输协议传输Metadata信息，不仅占用很大的LAN带宽，而且由于MDC必须运行NFS/CIFS服务器处理连接，所以消耗资源很大，在高负载环境中效率低下硬件管理（SAN网络、磁盘阵列和磁带库等）具备多种SAN网络和磁盘优化功能，可充分发挥硬件性能，在高负载环境中数据处理性能突出依赖其它文件系统技术处理硬件，在高负载环境中数据处理性能低下1. StorNext FS具有自己的磁盘逻辑卷管理功能，可以优化组合SAN中的磁盘资源，并且可以对SAN网络链路进行多通道并发处理、保证带宽质量和实现负载均衡，从而充分发挥SAN体系结构的优势。加上StorNext SM管理模块，可以管理多种磁带库和磁带介质2. SANergy由于依靠传统文件系统处理硬件，没有StorNext FS的功能，无法发挥高性能硬件的功能。所以其在大规模、高负载的SAN环境下性能低下就不奇怪了。SANergy没有集成的磁带库和磁带管理功能各主机文件系统使用方式工作站以本地文件系统方式安装共享磁盘工作站以网络文件系统方式安装共享磁盘1. 由于StorNext FS是独立的文件系统，所有主机以本地文件系统的方式安装（Windows环境中就是一个本地盘符），所有应用软件都可以以本地磁盘和文件系统方式处理StorNext FS中的数据2. 而SANergy不是独立的文件系统，它必须以网络文件系统的形式安装在主机上（Windows就是网络盘符、UNIX和Linux就是NFS文件系统），那些不能在网络文件系统上处理数据的应用就无法运行，或运行效率和很低，而且容易和一些软件发生冲突（如防病毒软件）各主机文件系统共享输出能力任意工作站可以通过CIFS、NFS、FTP等协议输出共享只有MDC主机才能输出共享（CIFS、NFS、FTP等）1. 由于StorNext FS是独立的文件系统，所有主机以本地文件系统的方式安装，所以所有主机都可以采用任何协议在为LAN中主机共享StorNext FS文件系统中的数据2. 除了MDC外，所有SANergy主机都无法为其他LAN主机提供数据共享，因为它本身就是网络文件系统，不能再次共享产品未来发展QUANTUM不断推出新功能和新版本IBM已计划将其停产或转卖1. QUANTUM公司将StorNext FS做为公司战略性产品，对其研发、市场推广和销售进行了大量投资，并将不断加入新功能，使StorNext FS不断向前发展2. 由于体系结构的限制，SANergy只是IBM公司的一个过渡性产品，即将被新产品代替，其命运不是停产就是被转卖，用户投资将得不到保护可以看出，StorNext存储管理软件在各个方面性能都高出SANergy，而且受限于存储体的超大容量和性能要求，StorNext存储管理软件已经成为本系统的不二选择。第6节 系统主要参数1.6.1 站点配置说明在汕头电视台媒资项目中，我们设计尽可能整合各个上载工作站的功能，来优化系统，我们布置了20台上下载高标清工作站、6台编目工作站、12台高标清收录服务器、20台文稿工作站。1.6.2 系统编解码格式参数建议采用下述参数做为系统主要的编解码格式和文件格式：应用场景推荐的格式压缩格式文件格式媒资成品节目外购节目码流和压缩格式同播出服务器完全一致自办节目存储媒资主要格式：MPEG2 I帧50Mbps或DV 历史资料上载格式：建议采用MPEG2 I帧50Mbps，符合电视台历史资料保存和再编辑的要求。低码率：统一WMV8 800kbps码率存储，供全台检索和浏览1.6.3 系统带宽参数计算访问对象数量写速率（Mbps）读速率（Mbps）取最大读或写带宽小计（MBps）上下载工作站205050125 MBps收录服务器12505075MBpsEMB/转码服务器8400-560400-560400-560 MBps迁移服务器2400-560400-560100-140 MBps文稿工作站200.80.82 MBps极限读写性能要求： 902MBps 此次方案提供的EMC CX4-480在线存储体可以提供1500MBps以上的网络读写带宽，完全满足客户902MBps的要求。1.6.4 存储容量选择存储体类别客户需求方案设计提供产品型号在线存储体1000GB SATA硬盘60块，600GB FC硬盘15块1000GB SATA硬盘60块，600GB FCEMC CX4_80磁带库配置250个以上磁带槽位配置400个磁带槽位Quantum Scalar i60001.6.5 硬件交换设备端口配置交换机类别配置数量占用端口数预留端口数备注光纤交换机Brocade 40端口4Gb交换机26020数据交换中心占用4个端口以太交换机Cisco24口千兆以太交换机68163每台交换机各配置4个SFP上行链路，用于楼层间连接第7节 组成模块主要功能上下载模块：完成传统介质形式历史资料的数据化和入库过程，数据化过程中可以实现关键帧提取和一次编目等功能。可将媒资库中保存的数据资料下载成传统磁带、转化成DVD、流媒体等多种格式，用于台内外数据交换等。支持信号源共享方式的上下载。智能编目模块：一次编目：遵循国家广播电视音像资料编目规范制定的标准，对视频节目/素材进行描述。一次编目以信息自动提取为主、手动著录为辅。在信息自动提取过程中，系统可自动识别视频节目/素材的关键帧并保存相关信息，形成关键帧和视频节目/素材的对应关系。同时，系统还可自动提取节目/素材的原始信息（例如：对应的文稿、上载过程中的预标注等）并按照预先定义的编目规范进行整理，也可进行手动修改或标注。深度编目：遵循国家广播电视音像资料编目规范对节目/素材的内容层次属性做详细描述，使其符合资料长期保存、再利用和交换的要求。编目过程中可配置不同权限用户实现不同编目层次的编目控制，还可进行多次审查以控制编目质量。通过编目审查的元数据可作为全文检索数据库的基础数据。检索查询：根据一次编目和深度编目的结果进行检索，根据不同应用场景使用B/S、C/S两种检索方式。板块可按照用户常用的查询操作定义查询界面风格，并可按照参量和全文等多种方式进行资料查询。对查询结果可进行视音频、图片、文稿等相关信息的浏览。用户确定所需内容后可根据查询结果直接发起迁移请求，条件成熟后还可实现对查询结果的粗编并将结果返回相应生产业务系统。资料挑选/整理：资料挑选/整理完成板块中数据资料的挑选、剪切、合并等功能。挑选人员可以通过专业界面标记需要整理素材的入出点，按照资料合并和剪切关系放入整理列表并调用业务支撑平台提供的资料整理服务，完成资料整理。资料迁移：根据预先制定的迁移策略和优先级别，集中处理分发迁移任务。板块具备自动迁移与手动迁移功能。每一类进入到板块中的资料，可根据预先定义的迁移策略，在规定时间自动迁移到规定位置。同时，可根据用户端检索的结果向选定的素材发出迁入/迁出命令，完成手动迁移工作。传统磁带管理：提供对数据流磁带的离线管理和传统磁带的库房管理。通过配置库房相关资源，包括库房、排架以及介质类型信息，快速完成节目带的出入库、回库记录、磁带的维护和报废处理等工作,从而使得配置管理方便、磁带管理快捷、库房调整人性化、信息查询准确 。资料内容管理：提供内容管理所需的元数据体系建立、对象关联定义、元数据访问服务等核心功能、配置管理界面等。资料存储管理：包括存储体系定义和存储处理两部分。其中存储体系定义包括存储空间的定义与管理，存储设备的注册和连接，存储设备状态查询等。存储处理流程包括：存储策略的定义，存储命令的解析，任务调度和分发，离线设备管理等。可对音频资料进行管理:满足音频资料的归档、分类、调用等方面的管理。在对媒体资料进行处理的过程中，可支持引入业务支撑平台提供的智能处理相关功能，用于媒体资料处理。管理统一：媒资网络板块应建设成统一的媒体资料管理，主要体现在资料入口的统一、资料存储管理的统一、资料出口的统一。总编室管理：总编室管理系统提供对各个频道、各个栏目和各种资源的调度和管理功能；能够满足日常的业务需求；充分实现磁带管理明细化、节目编排自动化、节目购销流程化、系统管理维护一体化。n 节目制作到播出的工作井井有条，一切尽在掌控之中n 对台内现有资源进行更加有效的分配和调度n 支持节目备播和支持统一编单n 可进行节目带、自制节目、外购节目、广告素材统一编排集群式转码中心： 集群式转码中心是处理转码任务的核心单元，负责接受转码任务，实现视音频编解码、文件传输、元数据交换等工作。 转码中心应用于大型网络中，转码任务是由网络中的相关子网（如制作、新闻、媒资等）通过调用工作流插件，籍由工作流引擎自动提交转码任务，并由转码中心按照相应的任务信息，自动完成素材的格式转换、迁移等指令。除此之外,当需要处理某些特殊需求的转码任务时，可使用转码模板编辑器和任务编辑器，自定义转码任务,手工提交给转码中心完成视音频文件的转码.第8节 系统主要设备详见货物明细表或报价明细表。第2章 服务器系统设计第1节 MDS服务器设计在采用SAN架构下设计的系统，需要使用存储管理软件对所有工作站对中心存储体的访问进行管理，此时需要在系统中指定MDS服务器用于管理。本系统中设计了主备MDS服务器模式进行管理，充分保证系统的安全。对中心存储系统指定一台服务器作为主MDS，另一台作为备MDS。主备MDS服务器上运行FC管理软件 ，一旦主MDS出故障，备 MDS自动切换，并向所有连到与该MDS相关磁盘的站点发出信息，更改磁盘与MDS间的映射关系。这些操作对HOST操作系统而言是透明的，客户机看到并访问的只是虚拟MDS服务器和虚拟数据库服务器，也就是说编辑站点无需重启机器就可实现MDS移交。利用Stornext的Failover软件方式实现的MDS热备份，由于主备MDS服务器均能够直接访问中心存储体，因此本系统中，通过存储管理软件集群软件实现MDS高可用、热备切换。在中心存储体中开辟一块共用空间作为主备MDS服务器的共享数据盘。切换过程中，客户端工作站无须重起，网络能够正常运行。第2节 数据库服务器设计本系统中设计采用了DELL服务器。同时采用数据库服务器双机热备方式，提供数据库的在线热备份切换等功能。数据高度共享化的网络对数据安全有相当高的要求。在网络中承担数据服务信息管理和网络结构信息控制的服务器需要具备周全的安全和应急策略，在过去，通常的做法是对数据进行定期备份。这样做不光要耗费数量相当巨大的数据存储空间，而且也无法在紧急情况下维持系统的正常运转和保证重要数据的不遗失、不损坏。考虑到广电领域对于数据安全性和应急策略的特殊要求，以及在系统故障时的可瞬间替换要求，在网络系统中，采用目前最先进的服务器群集技术和服务器之间热备和高可用技术。网络采用基于数据库的管理方式，而数据库中则保存着大量的数据信息。这样一来，运行数据库服务的网络服务器就变得十分关键。为了保证网络安全，数据库服务器采用了先进的双机容错技术（即服务器集群技术），它保证了数据、应用程序和通信资源的高可用性。这种应用的主要优点是：两台服务器通过软件建立一个虚拟服务器名，数据库资源挂在虚拟的服务器下，客户机访问数据库时直接访问虚拟机，两台服务器一主一备，一旦工作机瘫痪，备份机可以在一分钟之内接管数据库服务，客户端工作站无须重起，网络能够正常运行。接管过程对客户机是透明的，这种技术作为成熟技术已经得到广泛的应用并取得了较好的效果。第3节 Web应用服务器设计WEB服务器主要为台内的检索用户提供标准的HTTP服务，主要负责接入，而不负责处理事务逻辑。它根据请求内容调用应用服务器或数据库服务器上的相应功能完成服务，最后将用户请求的反馈数据提供给请求端。应用服务器的核心功能提供BS资源管理器。第4节 网络安全措施2.4.1 系统硬件的安全性u 两台磁带库采用双归档备份方式。u 服务器都集成RAID控制器，系统硬盘采用RAID1方式。u 中心存储系统提供校验、和冷备硬盘。u 各种类型工作站采用专业工控机箱，并进行散热的优化设计。u MDS服务器采用集群工作方式，采用电源切换模块模式保证系统安全切换u 数据库服务器采用主备工作模式u 以太交换机采用双机方式，完全避免单点故障。u 工作站点分散连接。2.4.2 网络系统软件平台的安全性u 中心存储体内的主要素材根据策略定期迁移到磁带库中。u 提供数据库服务器数据备份方案，确保中心数据不丢失。u 操作系统提供了完整的策略和权限配置方案。u 操作系统基于域用户管理方式，使整个网络统一为一个独立的域，保证了域不受外部用户或非授权用户的使用和破坏。u 网络管理软件提供设备管理和监控功能，另一方面对系统安全作出保护。2.4.3 应用软件的安全性u 统一完善的网络管理软件，完善的用户和权限管理。u 节目管理功能。u 应用软件提供掉电保护功能。第3章 应用系统设计媒资系统除了用于对传统的节目进行数字化采集和处理，同时还需对现有的制作系统和播出系统的节目进行节目归档。通过系统配置的EMB/ESB服务器对制作系统、播出系统进行归档保存。媒资系统获取用于归档的数字化节目，经过质量等方面的审查后，高质量的数字化节目文件存储到磁盘阵列中，同时节目相关信息包括一些原始编目信息将自动写入数据库。利用编目工作站完成对采集上载的节目的文字描述信息、节目详细编目信息的标引和录入。编目信息需要通过审核，审核通过后，该节目即可被用户检索、下载使用。系统根据事先设定的迁移策略（可根据用户需要定制，并且策略配置界面完全向用户开放）自动的将高码流文件迁移到数据流磁带库中。在用户需要下载某一节目时，如果节目在盘阵中就可直接提供用户使用；如果该节目已经上载到带库中，系统将自动完成从带库到盘阵的迁移提供用户使用。用户通过系统提供的多种查询方法，用户检索过程中，文字、图片、WMV低码流视频在WEB端可以立刻浏览，MPEG-2高码流节目的输出需要从带库或从磁盘阵列缓冲池下载，系统支持片断下载输出，用户可直接在WMV低码流上标记出需要下载片断的入点、出点，提交下载申请，将只下载入点出点部分的素材。审批通过后系统会通过存储管理软件完成节目的自动迁移。节目片断通过下载工作站以数字、模拟视音频方式输出至磁带或新建的新闻制作系统、现有的大洋制作系统中，完成节目下载。对于光盘介质和磁带介质的管理，除了提供数字化方式用于媒资保存外，系统同时提供库房管理软件对光盘介质和磁带介质进行有效管理。第1节 采集整理子系统采集整理子系统针对网络化文件提交、介质类上载两种方式通过不同的处理流程完成入库工作。在整个采集整理中，需要对整体的流程和任务进行监控、调度和控制。介质上载工作站完成视音频信号采集、视音频文件导入上载、浏览码率生成等同时提供视音频检测功能。上载资料的来源为传统录像带或其他光盘介质。 视音频素材在经压缩编解码后，还原的图像质量优于目前普通使用的Betacam SP的质量，完全能够提供广播级的技术指标。素材的压缩格式上不做限制，可以应用多种格式的压缩和解压。多种格式的素材可以在非线性编辑系统中共存和共享而不需要格式之间的转换。上载工作站具有专业化机箱和面板，服务器规格主机等特点。每一个用户登陆需要密码验证，由系统的用户管理系统和访问安全进行授权，系统中的上载，QC，下载、视频浏览所有的过程均有严格权限控制。第2节 下载输出子系统检索子系统提交了下载回调的申请，无论是输出到介质还是网络化回迁到全台网其它系统，都需要有相关部门有审批权限的领导的审批环节，且是网络流程化。基于全台网网络传输体系，必须提供系统互联和对外接口设计、联调服务。第3节 编目工作站遵循国家广播电视音像资料编目规范对节目/素材的内容层次属性做详细描述，使其符合资料长期保存、再利用和交换的要求。编目过程中可配置不同权限用户实现不同编目层次的编目控制，还可进行多次审查以控制编目质量。通过编目审查的元数据可作为全文检索数据库的基础数据。需要提供一些计算机自动处理技术，辅助分析节目、资料的信息，提高编目效率。包括：技术元数据自动提取、关键帧的自动重新提取等。中心媒资系统提供媒资版权著录功能。中心媒资资料下载、成品节目打包、媒资接收成品节目入库的各个环节使用一套统一的版权元数据描述规范来记录和传递版权元数据，方便版权元数据的自动记录和继承，减少后期人工著录的难度和工作量。编目检索系统一方面用于系统数据的加工处理，另一方面则承担着系统数据的再利用，系统的设计要以规范的管理，完善的编目，易用的检索，丰富的内容为主要目标，以“规范的管理，编目，检索”为建设重点。编目系统支持分层编目技术，对节目等资源可进行分层编目，即基于同一节目下，除对节目可以进行编目外，对节目下的片断等可以进行分别编目，支持4层的分层编目。完全可以满足通常用户需要的分层编目。索引类管理是系统内容管理平台的核心内容之一，编目检索只是索引类管理的客户化表现。我们下面通过数据处理能力，符合相关标准，开放性易用性等几个方面进行论述。数据处理能力编目系统是系统进行数据加工管理的核心环节，其处理的数据主要来源为传统磁带上载，包括电视台原有的素材库和新增的素材。符合相关标准满足相关的编目规范和标准是系统设计的一个重要目标，可以采用音像资料的国家编目标准或自定义的编目标准，同时基于DC元数据和XML技术的基本框架已经确定。开放性，易用性及可移植性系统软硬件设备必须具有良好的开放性，遵循业界相关标准，支持开放的标准接口。另外编目检索软件需要提供良好的用户操作界面，简单易懂，易于操作。编目软件在设计上必须充分考虑系统的移植性和后期的维护等，由于编目工作节点众多，而检索软件更要面对多种用户，因此软件的跨平台移植以及维护简单是系统设计的重要指标之一。编目审核针对编目完成的资料进行编目审核，只有编目信息确认无误的情况才能最终将编目信息写入数据库，供系统检索使用。本次系统设计了3台编目工作站和1台编目审核工作站。第4节 检索工作站中心媒资门户提供媒资最主要资料再利用方式，资料的检索查询入口，提供丰富的检索手段，供用户对中心媒资素材进行检索。提供主题资料库服务，有效提供资源组织手段；并且对媒体资源的展现提供有效的组织，以提升信息服务水平，比如提供热点推荐等；并且提供资源整理工具，以及资源回调申请工具等等。提供各类应用门户组织，提供居于用户的页面管理和模块集成。提供的检索方式：全文检索、关联检索、高级检索、分类检索、标签检索、拼音检索、同音字检索等。检索子系统提供对结果集的浏览功能，结果集的浏览的内容包括：标题、肖像、条目类型、时长、时间、动态摘要等。结果集的显示还包括分页浏览、按多种方式排序。检索子系统是用户查询和使用系统内节目资料的主要入口，检索子系统通过B/S方式实现，用户通过IE浏览器即可登录检索子系统。检索子系统提供强大的全文检索功能、灵活的参量检索和其它检索功能、方便的公文包/收藏夹功能，并可实时浏览节目的低码流视音频文件和关键帧信息，对用户检索查询提供最大化的帮助。检索工作站通过以太网交换机实现和应用/WEB服务器的连接，应用/WEB服务器根据检索请求提供页面服务。第5节 收录子系统根据各业务系统的收录需求，编制收录任务单；收录控制工作站根据收录任务单对信号、矩阵、收录服务器进行统一控制和调度，完成收录工作；收录的素材，以数字化文件存储到核心存储体中供其他网络使用。收录方式能够实现手动、自动、定时采集的工作模式；能能够实现收录任务的统一控制。第6节 内容管理子系统将系统存储的各种非结构化数据对象（媒体类对象）通过索引类对象的描述生成结构化数据，并通过结构化数据对象实现对非结构化数据对象的有效管理。要求做到数据层与应用系统的隔离，结构化数据对象（索引类对象）管理，人员管理与数据访问权限控制，工作流程管理，设备与资源统一调度管理，以及运行数据监测与统计分析。第7节 工作流子系统设计方案考虑采用统一的流程控制，负责系统的工作流管理，负责媒体资产管理项目中素材归档、采集整理、转码、编目处理、检索、素材资料下载等几大业务模块之间的衔接与协调并进行统一控制，同时也对单一模块的业务流程进行流程的控制和管理，如编目处理模块内部的流程管理。编目处理环节工作流程必须能够灵活的配置和更改，以满足用户的数据生产需要。将业务流程的管理与实际的客户端软件逻辑脱离，以实现用户灵活配置工作流程的需求。第8节 运行管理子系统系统监控和管理两个层面对系统进行全面的维护。负责中心媒资系统所有系用户的管理及维护，为全台网其他各模块用户提供授权，提供对媒资资源检索、浏览和下载使用的权限管理功能，同时也提供基于角色的权限管理方法。提供版权信息著录和根据版权业务管理需求进行版权审核的相关功能，并且提供输出版权保护的接口。提供中心媒资系统对多任务的管理，处理多任务的排队，根据相应的权限和任务优先级别，自动进行任务的排序并组织管理任务运行。对媒体资产管理系统运行进行监测，对任务运行状态进行跟踪监测和信息反馈。提供对媒体数据的使用情况进行统一记录和报告。利用这些完整的统计信息，对用户的使用习惯和媒体数据的使用分布进行统计和分析，以便制定出更合理的媒体数据管理方式，提高媒资的检全率和检准率，提高媒体数据的再利用效率。提供用户反馈管理模块，用于记录用户对于媒体服务水平等级、评定和意见反馈，为媒资管理策略和规范的合理化调整提供统计数据的支持。中心媒资系统作为全台系统一个部分，所以在中心媒资需要考虑用户认证与全台用户认证的接口以及媒资相关应用中单点登录的接口。同时对于中心媒资应用来说，还需要实现系统内部授权管理，即媒资系统与外部系统实现统一认证，内部授权。第9节 存储迁移服务器电视台现在的存储系统划分为在线、近线两个区域。各存储区将根据实际应用要求，配置相应的存储设备。在线存储系统采用磁盘阵列，近线存储系统采用独立的磁带库，离线系统是磁带的密集排架。两个存储区由存储管理系统统一调度，共同完成数据对象的存储、交换和维护任务。在线存储全部低码率素材和部分高码率素材，近线存储全部高码率素材，离线存储高密级高码率素材。存储管理服务器，负责迁移策略管理和数据流带库机械手控