云不再是操作的概念(白皮书).doc

云不再是操作的概念磐云公司云计算解决方案白皮书云不再是操作的概念磐云公司云计算解决方案白皮书宁波市磐云信息技术有限公司2011年9月7日目录引言3第一部分 磐云云计算的目标与方案4一、磐云的目标4二、磐云云计算的特点5三、磐云云计算的解决方案5(一)安全私有云平台5产品概况5硬件基本配置：5软件 5主要特性和功能6虚拟机群管理系统软件的特性和功能7(二)磐云云存储7功能、性能和特点7(三)海量数据处理平台8第二部分 磐云云计算的案列8一、海量数据处理解决方案9二、私有云解决方案10l磐云一号引言当前，全球IT 产业正在经历着一场声势浩大的“云计算”浪潮。随之云计算的崭新时代即将到来。云计算技术是支撑“数字基础设施”和“信息资源和信息基础设施”的最新技术。世界上发达国家都把“数字基础设施”作为“支撑繁荣经济与强大军力及公开高效政府的脊梁” 都把“信息资源和信息基础设施作为争夺世界领先地位的重要要素。所以，掌控云计算核心技术和关键技术已经成为发达国家间的竞争最激烈的领域。在云计算竞争中，我们是国内一支敢于在云计算核心技术和关键技术去争夺控制权的研发团队。一年多的努力已经表明：我们已经逐步在进入和掌控云计算部分核心技术和关键技术，并在某些方面有自己独特的创新和专利技术，它们的应用使得我们的产品在性能、性价比等方面表露出拥有自主知识产权的产品优势。云计算时代的到来给中国带来了难得的机遇，同时也带来了巨大的挑战。能否抓住机遇使中国的IT超越常规的发展速度，一改中国在IT行业的被动、落后的状态是中国研发人员正在认真思考的问题。第一部分 磐云云计算的目标与方案一、 磐云的目标磐云的研发团队是有一批具有一、二十余年研发经验的软件工程师组成，其中有具有国外大公司担任研发领头人的工作的经历，更有在云计算技术上具有独特理念和研发技术的研究开发人员。长期以来，外国跨国公司在信息领域的垄断，使国产软硬件与服务难以进入市场，当前云计算等新一代信息技术的兴起给了中国本国IT产业一个很好的机遇。为了迎接这次机遇，更为了一个共同的目标聚合在一起。我们的目标是：1. 集合有志于振新我国IT行业国内精英，建立具有国际水平的“云计算技术的研发中心”。2. 研发具有国内自主知识产权、符合“中国的信息资源必须有自主可控、安全可控的要求”的云计算技术的系列产品；3. 推出一批应用于智能化城市、物联网和海量数据处理的云计算技术的系列解决方案；二、 磐云安全私有云的特点1. 高可靠：独特的系统物理结构设计和逻辑结构设计（发明专利），无需SA采用价格昂贵的SAN或专用的NAS设备，用DAS模式实现了NAS的功能，支持ISCSI、HTTP、FTP、CIFS、NFS协议，支持POSIX协议，支持备用路由，防止由于交换机故障导致的系统全局故障和虚拟机的快速备份和转移。2. 快速高效：在线虚拟机备份压缩，单个机器虚拟机跨机器备份在10分钟以内， 恢复时间在1分钟以内，为同类产品最优。支持虚拟机在线迁移，内置系统软件模板、企业的基本应用软件、云存储，交钥匙工程,快速部署和使用。3. 高性能：与同类产品比较更好的虚拟机IO性能，虚拟化后的IO损失在10%以内；直接支持CPU虚拟化。4. 安全：支持路由器-云365服务器-HOST-GUEST多层防火墙设计和网络报云存储的数据包日志审计功能及身份认证，远程桌面端口加密功能和禁止本地资源共享功能，保证云上的信息安全。5. 防灾难：跨机备份+远程备份+GUEST备份功能，防止灾难发生。6. 易使用：全部中文界面，包括云管理OS。三、 磐云云计算的解决方案(一) 安全私有云平台产品概况：(以磐云一号为例)硬件基本配置：l 19寸标准机架；l 机架式服务器 三台（可以扩充至12台）( PowerEdge R710)每台配置：双CPU（四核） 、16G 内存（最大可以扩大到192G）、500G 2个可插拔硬盘（最大可以扩大到6个可插拔硬盘）、6口千兆网卡（最大可以扩展到16口千兆或10千兆网卡）l 2T容量后备系统；l 19英寸显示器；l 8口键盘、鼠标切换器；l 千兆交换机； l 1+4口华为MSR-20-11路由器软件：基本软件（包含在产品中）：1) 分布式云存储系统；2) 支持多域名电子邮件系统； 3) 动态网页软件；4) Spark(内部网上交流软件)5) 虚拟机：已经安装Win XP SP3、Win 2003、Win 2008 Server、Win7、Centos5.4、Redhatas 5.4（不包含软件许可证）；支持Microsoft windows 、LINUX、Solaris、BSD、IBM OS/2、 Mac OS X、 OTHER。6) 虚拟机群管理系统软件；7) MYSQL、PHP、APACHE（for windows 和 for linux）8) 支持云存储FTP、HTTP软件、POSIX、开放云存储API接口(可选择)：内置MongodbHADOOP（可选）ORACLE10.0.4(64位) FOR LINUX(可选)C语言云计算开发工具包（可选）主要特性和功能：1) 每台实体机可以支持8-16台虚拟机；（以三台实体机计算最多可以达48台虚拟机）这样大大节约服务器的投资，提高系统的性价比，适用于较大的企业、园区或办公楼中使用；2) 虚拟机群管理系统软件是磐云最具有特色的部分，它提供了远程管理功能，便于操作和有效管理；详细见：“虚拟机群管理系统软件的特性和功能”；3) 可以选择有效隔离企业不必要的网站和应用（如：QQ、MSN、BitTorrent、eMule/eDonkey、Yahoo Message等），以确保公司员工上班不干私事、不分心，同时也保证公司网络的畅通。4) 提供支持多域名电子邮件系统；这也为园区或办公大楼的云平台为不同域名多个企业提供电子邮件服务；5) 提供Spark取代网上其它的交谈软件。为了避免内部文件的外传，Spark只能在云内收发文件；6) 提供动态网页软件；网页制作变成十分简单，主要采用填充的方法制作企业网页；7) 根据需要和可以对有关的外设的使用进行控制，以达到内部的信息、文档外传；8) 网络硬盘功能和虚拟机与您的桌面电脑或者笔记本电脑的文件夹同步功能。虚拟机群管理系统软件的特性和功能：虚拟机群管理系统软件主要有两大部分组成: 服务器端和客户端软件组成。它的主要特色是能够提供不同的安全运行模式：n 防止内部数据泄密模式；(虚拟机逻辑隔离)n 云内安全运行模式；（内外网分离和审计）n 带有安全监控和审计的云内外网运行模式；(限制性访问和审计)(二) 磐云云存储磐石云存储软件与同类产品比较具有更好的可靠性、性能、性价比、系统结构、可扩展性、可维护性。功能、性能和特点：1、 支持每组最大12个节点，每个节点4T，最大在线48T，备份存储为USB2.0、USB3.0或者支持ISCSI存储设备，最大48T,最多管理65536个节点。2、 根据前端应用和访问频率和流量，提早预判并智能调整流文件的分布位置和多服务器可访问性。3、 适合任何类型文件的存取（包括小文件和大文件的存储），支持http和https访问流文件和ftp用户名密码访问流文件（包括视频和音频），支持HTTP上传文件，支持POSIX协议客户端访问模式，提供对应的协议的访问插件，云端文件支持目录和文件名存取和查找。4、 支持流量控制，连接数控制，每个客户端的ip的最大连接数控制。5、 支持主备模式的下载（客户端软件或者插件配合），支持主模式的上传。6、 每个节点支持73MB的下载和上传能力，最大并发用户数2000个（保证每个用户1M带宽）以上（根据节点数）。7、 支持以节点和根据iscsi协议的存储设备的动态存储扩展；8、 平均流文件查找时间小于2S，每个连接下载和上传速率300K-73M(可以配置)。9、 采用特殊的存储技术和复制技术和智能处理算法（连接），保证数据可靠，动态平衡存放和自动调整存储结构和位置。10、 每个7-15G(根据配置选择)的缓存可以保证更多的数据滞留在缓存中，等待向硬盘空间的重新写入。11、 可以选择1+1服务器模式，保证系统的高可靠性和良好的稳定性。12、 采用磐云云存储的六大结构设计专利技术，保证系统的技术先进性和良好的可扩展性和可维护性。13、 在线监控用户访问情况和资源占有情况，保证系统的安全性。(三) 海量数据处理平台磐云海量数据处理平台能满足于物联网、智能化城市应用的需求，这些应用的特点是处理大容量、高并发、实时更新、快速存取的流数据（例如：当前实时的位置信息和位置历史轨迹，包含时间、地点、人物、事件【用图片、视频或者文字数据表示】类数据和日志类数据），在12个节点的集群中可以处理每秒1000万的此类事务。特点：l 具有自主知识产权的针对准静态和动态流数据云存储服务的支撑系统l 良好的系统框架和可扩展性和符合POSIX标准CDMI标准l 完全用GCC实现，跨平台（linux和AIX等）l 与同类开源项目比较我们最高效l 根据物联网数据特点组织数据，经过浙江移动天气预报大数据量的商业考验，高可靠性（电信级应用7*24）l 具有云存储服务的相关技术和应用DEMOl 独创有别于现有云存储的流数据云存储技术，代表国际云存储技术发展方向功能：1） 支持TCP、HTTP、FTP数据流、传统数据库的数据和csv格式输入和输出。2） 支持根据ID、位置、时间的流数据直接处理和存取（可以迭代），与MAP-REDUCE模式相比，采用工作流实时模式处理，在高性能和实时性上非常出色。3） 支持多进程跨机动态任务处理、调度和管理，实现高可扩展性和可靠性。4） 在线监控用户访问情况和资源占有情况和云计算进程的运行情况，具有进程和节点故障自动恢复功能。5） 支持分布式并行查询数据和分发处理进程功能。6） 支持自动环形的数据分布式存取和历史数据的压缩存储，减少系统设计和维护的工作量。7） 支持正则表达式查询内部数据，支持数据的index。第二部分 磐云云计算的案列一、 海量数据处理解决方案l 浙江省移动的天气预报和应急短信发送平台，总容量达4500万用户，注册用户达1200万，完成一次天气预报的发送一个小时完成。l 混凝土行业的质量监控系统（平台），实时采集数一个区域的混凝土生产过程的数据，提供混凝土批号的网络查询和质量跟踪。l 公安局（以国家、省、市、县为单位）的视频监控信息存储的