全媒体资源库

图1-41所示图1-SEQ图1-\*ARABIC41新闻收藏界面创意收藏收藏的创意图片可以在这里展示。历史资料管理为报社建立历史资料库，可存储的大量不常用数据和各种资料数据，和其他资源。全文检索对报社的数字资源（包括图片资源）的全范围搜索，除常规的按日期查看、按分类查看外，实现关键字全文检索。提供全文检索功能：要提供对XXX全媒体数字资源服务平台的全文搜索。实现丰富智能的搜索手段，包括：任意短语和长句的检索、支持多种检索表达式、组合检索、二次检索等。实现检索结果的多种排序方式，如按作者、时间、所属分类等。数据存储管理报社的信息数据量大、内容数据类型复杂、数据安全性可靠性要求高，我们的系统能够采用多数据库的分布式管理模式，把历史数据、工作数据、临时数据、核心数据等能够分开管理和处理。全媒体数字资源服务平台可按照资源的分类、时间、对应的不同处理部门对数据进行区别管理，并通过定期的备份归档机制将不同年份的数据分区存储。系统要集中管理所有的资源文件。资源数据按照统一制定的分类体系进行标注和存储。这些数据分布存储于不同的数据区域，相关内容必须存储于数据库中。数据库可建立用户权限管理机制。对于图片的缩略图查看、原图查看、原图使用，对于文字的原文查看、原文使用，都有相应的用户权限设置。系统提供业务平台对全媒体数字资源服务平台的访问接口，使业务平台能够调用加工整理后的内容资料。在业务平台中能够输入条件在内容库中进行检索，并能够快捷的获得结果，在业务系统中使用。我们系统的数据库存储方案遵循以下原则： 不同类型的业务数据分开存储； 生产数据和资料数据分开存储； 生产数据根据部门等处理用户的不同分开存储； 资料数据根据分类和时间的不同分开存储； 不同年份的数据可以考虑采用分区存储；便于存储容量的扩充保证数据访问的效率；系统管理机构、用户和角色管理可以管理系统的用户，用户可以分成不同的角色，如管理员用户主要进行系统管理，系统维护人员主要负责数据的维护，普通用户，主要是通过访问系统，获取所有的资料信息。应用权限管理用户的授权是可以在不同粗细粒度上进行。权限设定可做到库级、字段级和分类级的控制，对一个使用者而言，可做到只看到权限范围内的部分文章对象，这些对象的字段/内容可设置成禁止阅读、以及敏感文章可自动隐藏等功能；对于图片的缩略图查看、原图查看、原图使用，对于文字的摘要查看、原文查看、原文使用，都有相应的权限设置。这样两个权限不同的使用者，同样的操作得到不同的页面。权限控制可以提供基于用户/角色、基于IP、基于操作等多种方式选择。面对应用系统的扩展，其授权也可作相应的扩展。实现需要交换的共享的内容的操作权限管理，实现哪些用户可以进行读取、哪些用户可以进行修改、哪些可以进行删除、哪些可以完成添加等功能。稿件类型管理稿件类型管理主要稿件管理元数据，实现数据类型的扩展。库管理系统主要完成数据库的创建和结构的定义。数据库的大小不受单个硬盘的限制。全媒体资源服务平台系统采用多数据库的分布式管理方式，把历史数据、工作数据、临时数据、核心数据等进行分开管理和处理。通过库管理实现：不同类型的业务数据分开存储到不同的库中；生产数据和资料数据分开存储到不同的库中；生产数据根据部门等处理用户的不同分开存储到不同的库中；资料数据根据分类和时间的不同分开存储到不同的库中；系统通过定期的备份归档机制将不同年份的数据采用分区存储；便于存储容量的扩充保证数据访问的效率；跨地域的生产数据通过数据复制等技术实现分布式存储管理；资料数据要根据访问频率进行分级存储，并通过缓存机制实现部分数据快速访问；业务流程管理对录入编辑的工作流程进行管理，方便支持流程的扩展和修改。文件存储管理支持文件数据的分布式海量存储，通过文件存储管理，还可以把文件存储设备扩展到新的服务器上，实现按照资源的处理阶段划分存储区域，也支持针对不同的站点划分不同的存储区域，即实现不同级别的站点分开存储。支持文件数据多种格式存储。即将一个文档存成另外一种格式，不同于它原来的格式或用法。系统实现关键应用级文件数据备份功能，通过在应用中记录应用系统使用者的操作，实时的把操作结果保存为两份的功能。通过把备份时间设成报社非工作时间，保证备份操作的效率。分类管理支持多种分类类型，支持分类的扩展，支持分类码转换，采用《GB/T20093-2006中文新闻信息分类与代码》作为分类标准。数据源管理系统支持多个数据源，支持与多个关系数据库做连接。日志管理系统提供全面详尽的日志信息记录功能，对系统中用户的一些日常操作记录，稿件加工的操作记录，稿件下载都进行统一管理。系统能够记录用户的登录时间、退出时间、进入系统后对哪些内容进行了操作，操作时间、操作类型等，都进行全面的记录。对日志可以进行浏览、查询和归档。提供图表方式的统计数据，可生成统计基本报表；系统能够提供各项运行指标，包括各个库表的空间大小、记录数目、增长速度等等，方便系统管理员维护管理，对系统的日常工作情况进行监控管理。后台服务任务管理根据应用子系统的需要，配置一些后台运行的服务，支持添加，启动，关闭，删除功能。系统错误跟踪管理可以跟踪系统中发现的错误，及时定位错误位置，便于快速排出故障。与相关业务系统的衔接全媒体资源服务平台库系统支持与报社全媒体新闻生产系统无缝对接，采编系统里的业务数据设定期限后可自动归档到全媒体资源服务平台库系统中进行存储。全媒体资源服务平台库系统内的文字、图片内容可直接再签回到报社采编系统中进行后续的加工应用。系统具有对外销售增值的业务接口，方便报社后续的图片资料、内容资产的网络销售。

硬件系统方案服务器系统服务器系统是报社业务系统赖以运行的支撑平台，其安全性、稳定性、高效性和可靠性是业务系统的基础和保障。结合方正电子的集成经验，本着从应用出发，适用、实用的原则，总结了以下关键业务服务器的选型经验和思路，以供最终选型时参考。服务器的可靠性和可用性是首要的需求，其次是数据处理能力和安全性，然后是可扩展性和可管理性。服务器选型五个原则1)高性能原则保证所选型的服务器，不仅能够满足运营系统的运行和业务处理的需要，而且能够满足一定时期的业务量增长的需要。同时，选择高性能价格比的服务器。2)可靠性原则可靠性原则是所有选择设备和系统中首要考虑的，尤其是在大型的、有大量处理要求的、需要长期运行的系统。考虑服务器系统的可靠性，不仅要考虑服务器单个节点的可靠性或稳定性，而且要考虑服务器与相关辅助系统之间连接的整体可靠性，在必要时，还应考虑对关键服务器采用集群技术，如：双机热备份或集群并行访问技术，甚至采用可能的完全容错机。比如，要保证系统(硬件和操作系统)在99.98%的时间内都能够正常运作(包括维修时间)，则故障停机时间六个月不得超过0.5个小时。服务器需7×24小时连续运行，因而要求其具有很高的安全可靠性。服务器如出现CPU损坏或其它机械故障，都能在20分钟内由备用的CPU和机器自动代替工作，无须人员操作，保证数据完整。3)可扩展性原则保证所选型的服务器具有优秀的可扩展性原则。因为服务器是所有系统处理的核心，要求具有大数据吞吐速率，包括：I/O速率和网络通讯速率，而且服务器需要能够处理一定时期的业务发展所带来的数据量，需要服务器能够在相应时间对其自身根据业务发展的需要进行相应的升级，如：CPU型号升级、内存扩大、硬盘扩大、更换网卡、增加终端数目、挂接磁盘阵列或与其他服务器组成对集中数据的并发访问的集群系统等。这都需要所选购的服务器在整体上具有一个良好的可扩充余地。一般会采用集群方式来增加可靠性，其中挂接的磁盘存储系统，根据数据量和投资考虑，可以采用DAS、NAS或SAN等实现技术。4)安全性原则服务器处理的大都是相关系统的核心数据，其上存放和运行着关键的交易和重要的数据。这些交易和数据对于拥有者来说是一笔重要的资产，他们的安全性就非常敏感。服务器的安全性与系统的整体安全性密不可分，如：网络系统的安全、数据加密、密码体制等。服务器需要在其自身，包括软硬件，都应该从安全的角度上设计考虑，在借助于外界的安全设施保障下，更要保证本身的高安全性。5)可管理性原则服务器既是核心又是系统整体中的一个节点部分，就像网络系统需要进行管理维护一样，也需要对服务器进行有效的管理。这需要服务器的软硬件对标准的管理系统支持，尤其是其上的操作系统，也包括一些重要的系统部件。为保证报社编采业务以及整个文字处理和出版流程的顺利运作，无论是全媒体新闻生产、全媒体资源库、通讯员投稿、文件服务等等都离不开服务器系统。作为承担系统数据存储、加工、转换及综合处理的系统中心平台--系统服务器，是否能很好的承担此核心任务是系统成功的重要基础。服务器是报业业务系统基础建设的核心。因此，对于服务器的选型，首先需对其业务系统的业务类型、业务复杂度等方面做系统的需求分析，其后根据需求在数据容量、数据处理的强度等方面进行估算，并兼顾服务器的可靠性、扩展性、安全性、可管理性等方面综合考虑，完成最终的产品选型。数据库服务器数据库服务器将承载关系型数据库系统，用于管理和存储采编、图片生产系统核心管理数据、原数据等小对象（比如稿件、简图等）结构化数据，相当于应用系统的管理中枢，同时也是业务系统赖以运行的基础。所有客户端子系统都要与其建立直接的实时连接。因此，数据库系统的稳定性要求非常高。数据库系统对服务器的处理器、内存的要求较高，但对数据存储及存储容量的要求一般，属于计算密集、敏感型应用。机集群系统架构为提高全媒体资源平台及服务器操作系统安全、稳定运行。我们建议使用高可用模块来做服务器的双机热备，保障整体系统7*24小时平稳运行。双机高可用方案主要有两种架构方式：共享磁盘系统高可用各服务器之间共享磁盘阵列设备。当活动服务器发生故障时，待机服务器将使用共享磁盘上的数据来继承业务。通过使用共享磁盘，覆盖数据量可达到数TB级。镜像磁盘系统通过私网对高可用服务器上的数据磁盘进行镜像化。当活动服务器发生故障时，待机服务器使用镜像盘上的数据来继承业务。由于数据的镜像化是以I/O为单位进行的，因此，从上层应用程序来看，与共享磁盘效果是相同的。但是数据量上仅适合于数据容量为数十GB以内的系统。根据全媒体资源平台存储数据量，我们建议采用共享磁盘系统的双机高可用。当某台服务器发生故障时，通过高可用模块的支持，另一台服务器会检测到故障，并自动切换故障服务器承载的应用，接管共享存储中的数据，保障全媒体新闻生产系统流程不间断。服务器推荐选型根据以上性能分析，本次方案我们推荐全媒体资源平台各采用两台DELLR720服务器做双机集群，每台配置双路六核处理器，32GB内存，2块300GB10krpmSFFSAS硬盘承载全媒体新闻生产系统。DELLPowerEdgeR720双路2U机架式DellPowerEdgeR720服务器树立了功能灵活性方面的新标准，配备高度可扩展的内存、I/O容量和灵活的网络选项，可以轻松运行复杂的工作负载。DellPowerEdgeR720机架式服务器是一款配有高度可扩展的内存（最多可扩展到768GB）与超强I/O能力的通用平台，能够轻松运行大中型企业的各种应用程序以及虚拟化环境。借助英特尔至强E5处理器和对双RAID控制器的支持，R720可以稳健地处理要求极为苛刻的工作负载，如数据仓库、电子商务、虚拟桌面基础架构(VDI)、数据库和作为数据节点的高性能计算(HPC)。存储系统存储管理层目前包括三种存储架构，即DAS、NAS和SAN。其中，DAS即直接连接存储，存储设备直接与数据存储需求者连接，系统对磁盘BLOCK请求直接发送到存储设备。DAS存储设备通常是具备双RAID控制器的中低端磁盘阵列柜且无单故障点。DAS存储方式的主要优势是高性价比，通常适用于数据存储需要不大且无共享数据存储需求的环境。NAS即网络附属存储，是一种基于以太网的专用文件存储和共享设备。NAS存储设备通常由机头（负责存储设备和文件管理服务）和磁盘箱（存储设备）两部分组成。高端NAS系统机头会采用冗余配置，以保证NAS核心系统无单故障点。NAS存储方式的主要优势是文件共享、备份和容灾，通常适用于对文件、图片等大对象数据有存储需求的环境。另外，目前很多NAS厂商提供SAN、NAS混合型一体化产品。SAN即存储区域网络，是一种通过专用交