大数据迁移解决方案设计

1、1数据迁移解决方案VNX系列支持在线数据移动和迁移，同时将复杂性和中断降至最低。快速、高效并且无中断地在存储层、平台和站点之间移动数据。EMS司有众多的工具实现在线数据迁移，为组织提供了选择余地和灵活性，让他们可以在正确的时间使用正确的工具提供正确的服务级别，针对本项目EMCt众多的数据迁移工具包含：数据块迁移选项在线VNXCLARiiONVPLEX基于阵列的透明迁移VMwareStorageVMotion适用于VMware环境的迁移PowerPathMigrationEnabler基于主机的透明迁移RecoverPoint/MirrorView远程复制和灾难恢复第三方SANCopy基于阵列的

2、快速迁移，需要宕机迁移服务EMC与合作伙伴迁移服务1.1数据迁移工具1、EMCPowerPathMigrationEnabler(PPME)PowerPathMigrationEnabler(PPME)是基于主机的迁移产品，可在存储系统之间迁移数据。PPME充分利用PowerPath技术并结合使用其他基础技术(如OpenReplicator或EMCInvista?)来实际迁移数据。PPME®过利用基于阵列或SAN的复制来提供基于主机的解决方案，几乎不会对主机资源造成影响。PPMB!过三种主要的方式来使数据迁移受益：大大减少或消除因迁移而导：MC致的应用程序中断现象，同时降低迁移风险以

3、及简化迁编用PowBEathMigrationEnabler独立于PowerPath多路径技术，将PowerPa，于多路径。2、SANCOP是VNX免费自带的一种数据迁移是一种简单开放、经济高效的数据移动、迁移和保护工具，可以实现在VNXSymmetrix和第三方阵列（HDS旧M、HRNetapp）之间快速拷贝数据，执行从经认可的存储到VNX系列的在线迁移，对主机应用程序的中断最小，以增量更新方式将现有的HDSASM230cB标卷采用推/拉送方式到VNXS列存储，通过EMCUinsphere管理套件或EMCReplicationManager/SE集中化管理，3、EMCOpenMigrator

4、/LM是一种实现在线数据迁移工具，EMCOpenMigrator/LM支持在EMC存储和任何其他来源之间在线迁移Microsoft?Windows?、UNIX或Linux卷的数据。基于主机的OpenMigrator/LM软件自动执行并简化数据迁移，从而提高整个信息基础架构的效率。无论是整合服务器、升级存储还是调整性能，都可以让卷在迁移期间保持在线并完全可供关键应用程序使用。止匕外，主机应用程序仍然以峰值性能运行。4、EMCOpenReplicator是高端存储免费自带一种软件，在多种复杂配置中帮助实现在Symmetrix及其他异构阵列之间移动和迁移数据，最适合大数据量一次性迁移，且迁移速度块。

5、5、EMCVPLE是一种软硬件一体的无中断业务的数据迁移工具，可以实现同构或异构阵列不中断业务的在线数据迁移，同时还可以实现存储本地或跨数据中心双活；6、FederatedTieredStorage（FTS）是高端存储免费自带的一种虚拟化同构和异构存储软件，同时可以用做数据实施在线迁移。7、联合实时迁移（FLM）通过利用阵列自身的智能消除基于主机或基于SAN的迁移战略的复杂性，提供第一而且唯一一个真正的无中断迁移解决一无需向组织的SAN或主机中“插入”或添加新硬件或软件，支持不同数据移类型的组合，如密集到密集、密集到精简以及精简到精简，还可将多个系统整合到一个Symmetrix系统上。还有众多

6、的数据迁移工具，结合以上前七种解决方案可以实现数据迁移，在项目实施后可任意选择一种方案，实现交警总队关键业务系统在线数据迁移。针对本项目，EMC1厂实施工程师将详细调研现状后，提供详尽的数据迁移方案来实施数据平滑迁移，保障在交警总队承受范围内实现数据搬迁。目前EMC涉及数据迁移的方法非常多，EMC等按照实际需求会提供最为可靠、宕机时间最文案大全短的方案来实施数据迁移。本次项目我们假设采用SANCOP数据迁移工具：该软件在购买VNX系列产品免费附送，是一个跨平台的快速、高效数据移动工具，EMCSANCop河以帮主要辅助助实现EMCVNX系列和经认可的存储系统之间的高速数据移动、迁移和保护。利用V

7、NX存储系统的弓虽大威力,SANCopy提供了无与伦比的部署灵活性-允许您选择完整拷贝或增量拷贝能力-和对EMCVNXEMCSymmetrix、旧M、HDS及Sun存储阵列的支持。并且，使用SANCopy/E,您现在能够从部署在部门或分支办公室中的CX3和CX4系统向具有更大的VNXS列系统的数据中心进行增量拷贝。SANCopy与EMCSnapView和EMCReplicationManager解决方案紧密集成，为保护和恢复MicrosoftExchange和其它应用程序环境提供了高度灵活且易于管理的选项。使用SANCopy可以满足多种服务级别要求，而且对运营的影响最小。SANCopyRPO:

8、从寂小时到数天?在存储层、VNX和经鉴定的第三方系统之间移动数据?具有应用程序整合功能的灾难恢复，可以在辅助站点上重新启动副本?可在增量或完整模式下使用?无距离限制?从一个来源复制到多个目标SymmetrixIBMSANCopy概述针对数据整合和数据分发问题的软件在阵列之间拷贝数据完整拷贝和增量拷贝-双向基于阵列对服务器或LAN无影响单点式管理通过编写脚本来实现自动化不需要其他硬件独立于应用程序和操作系统VNX、Symmetrix和第三方系统*如图所示，SANCopy是一种独特的软件产品，可通过部署它来解决数据整合和分发方面的问题。它实施开放式体系结构；并允许在多个CLARiiON系统、CLA

9、RiiON和Symmetrix系统以及CLARiiON和经认可的第三方系统（如来自旧M、HRHDS等的系统）之间快速地进行批量数据传输。SANCopy有两种操作模式：完整模式或增量模式。如果在完整模式下使用源LUN和SANCopy,则在拷贝完成之前，源LUN必须一直处于非活动状态。不过，也可以将SnapView快照或克隆用作SANCopy源；如果源位于Symmetrix上,则它还可以是TimeFinder系列BCV增量SANCopy允许源LUN处于活动状态，因为它在内部使用SnapView来跟踪更改。因此，对于增量SANCopy,您不能使用SnapView快照作为源LUNSANCopy通过“拉

10、入”和“推送”功能实现双向拷贝能力能够承载SANCopy的CX和VNX系统：- CX3、CX4VNX驻留在承载SANCopy的系统上的- 完整或增量数据拷贝可以被“推送”到任何EMC或受支持的第三方系统驻留在任何受支持的系统上的完整数据拷贝可以被“拉入”到承载SANCopy的系SANCopy可在VNXffiCX系列系统上运行。SANCopy可以将来自这些系统上的完整或增量数据拷贝“推送”到任何受支持的EMC或第三方系统。增量更新速度更快：它们可以减少通过网络传输的数据总量，因为SANCopy仅拷贝自最后一次SANCopy会话后发生的更改。SANCopy还可以在上述系统上从任何支持的系统“拉入”

11、完整的数据拷贝。在这种情况下，被拷贝的数据会驻留在受支持的系统上。对于正在被拉入的数据，仅支持完整卷拷贝。可以减少风险，降低成本，为存储基础结构增加灵活性可在需要时随时随地快速拷贝数据。方便地将数据从经认可的存储系统迁移到VN添列网络存储系统。为多种目的创建本地生产卷的远程时间点拷贝-从灾难恢复到远程测试和开发。通过与EMCReplicationManager/SE集成保护和管理MicrosoftExchange和SQL环境消除数据移动任务执行期间对生产活动的影响。通过高效数据复制实现对行业政策和政府法规的遵从性。本次项目我们假设采用OpenMigrator/LM工具，它是EMS司的一款数据复

12、制软件，支持WindowsUNIXLinux等多种操作系统，主要用于数据迁移、灾难备份等相关领域。EMCOpenMigrator/LM支持在任何源和EMC存储之间执行卷级别的在线数据迁移。OpenMigrator/LM是基于主机的软件，它通过自动化并简化数据迁移提高了整个信息基础架构的效率。无论是要整合服务器、升级存储，还是要调整性能，都可以让卷在迁移期间保持在线并完全可供关键应用程序使用。而且，主机应用程序将继续以最高性能运行。Cop/SessionArpe0，卬EMCOpeiVlgrapor/LkDevliftContrarcdjc+icnHoststornlg"otecreat

13、s-sessionsession1-fIsolumG_pairsWsLlqrcrtqoctKa-sessionsessiDnl科3rLi©'口tQcopy'SGSEionsassorl1.2数据迁移理由为什么要迁移到新EMCVN粽列存储上，其理由如下:为性能进行迁移VNX采用MCX?多核优化技术，最多可提供4倍于从前的虚拟机，同时提供更多事务、更多文件操作和更多虚拟桌面，所有这一切都以合理的价格提供。使事务性应用程序的文件性能提升高达3倍，同时使响应时间缩短60%。VNXFASTSuite以闪存驱动器的速率吸收繁重的I/O负载，从而提供更一致的响应时间。为效率进行迁移

14、VNXFASTSuite自动分层功能和扩展的缓存软件对数据进行动态分层，从而优化性能和成本，可使驱动器数量减少高达2/3。VNX高级效率服务（包括文件和数据块重复数据消除、压缩和精简资源调配）可以将容量需求降低高达50%。随着容量不断增长，VNX能够跨多个应用程序，以基于文件和基于数据块的方式对您的环境进行整合。为保护进行迁移利用DVR式恢复功能保护您的应用程序数据并提供业务连续性，让您高枕无忧并获得全面的本地或远程保护。尽享用于提供应用程序一致性保护的简单、自助式SLA方法。除在数据中心内和跨数据中心提供高可用性之外还能提供连续操作。为简单进行迁移统一的管理：从一个中心位置通过单次登录管理一

15、切一NAS和SAN存储池、复制、虚拟机以及迁移。EMCVN为统一存储解决方案已针对虚拟应用程序进行优化，与业界领先的（来源：Wikibon）VMwar?vSphere?和MicrosoftHyper-V集成，可实现具有虚拟化意识的存储资源调配、监视和分析。一路单击，在几分钟内即可完成管理任务，不再需要几小时。为更低成本进行迁移有资格利用EMC全球金融服务提供的灵活融资解决方案。利用CLARiiON?和Celerra?系统的折旧金额。不妨做一个通盘考虑：您花费更少的时间、使用更少的资源、需要更少的容量、在同样的占地空间获得更高的性能，并且可以消除停机时间。所有这些可为您省下多少钱？1.3 数据迁

16、移内容当新存储空间以及SAN网络全部就绪以后，且数据备份工作完成后，就可以进行数据迁移工作，根据生产卷情况调研的结果，整理出如下格式的vg信息表格，以指导进一步的迁移工作：vgnameppsizelvnamePPslvsize实施前工作准备1系统备份系统备份：在数据迁移实施前，对所涉及到的主机进行系统启动镜像备份，并对镜像数据进行启动测试，确保备份系统可用。生产数据备份：将所有涉及到数据迁移的生产数据进行备份，以备在数据迁移过程中出现意外情况时使用。2设备健康检查及信息收集设备健康检查：对本次迁移涉及到的主机、交换机、存储等设备进行健康检查，避免迁移过程中出现意外情况。信息收集：在健康检查的过

17、程中，可分别在主机和原SAN交换机上收集与本次实施相关的部分信息。主机上需要收集的信息有：主机型号、操作系统版本、操作系统补丁版本、主机磁盘信息、HBL型号以及HBAWWN。数据迁移步骤1.建立目标卷按照原vg/lv信息，建立目标卷。1 .建立目标vg.建立目标lv.为各vg构造日志文件2 .源设备到目标设备对应关系文件（pair.om）原存储设备新存储设备/dev/XXX/dev/YYYY1 .数据复制上传pair.om文件至主机.调整数据复制参数.建立复制关系.激活会话并开始数据复制.检查数据复制情况1 4.业务切换.数据复制完成后停止应用系统.检查数据完整性.卸载所有文件系统.断开OpenMig