云存储应用白皮书2023 -阿里云

推荐语存储伴随着阿里云技术的成长，从诞生之初就植入了多种创新自研技术,在业界序 10 10 10 11 13 14 16 18 18 20 22 22 24 24 26 28 33 35 37 40 44 45 47 47 48 50 50 50 52 53 54 58 60 61 63 63 66 68 71 74行业综述一、数字经济时代已经到来差异。为了避免行业云的设计方案因人而异或因事而异，需不断应对互联网时代的诸多挑战，从而在今天构建起并梳理了数字经济时代的底层范式和基础设施的云化需要一套新的技术体系，需要基于互联网 二、存储行业的变革云存储是基于云计算相关技术延伸和发展而来的全新的产品形态。本质上云存储的内核是应用软件与存储设备相结合，通过应用软件来实现存储设备向存一个由多个存储设备和服务器所构成的集合体。因此使用云存储时并不是使用某一个存储实现了一份数据多个协议的同时访问的能力，使得不同的应用可以根据需要用不 为了应对图片和视频数据的快速增长，对数据进行智能分析成为刚需，阿里云的智能媒体客户也可以享用到阿里云以及达摩院强大且先进技术产品一、强大的技术基因开放分层的软件架构是飞天盘古在系统架构演进上的重要实践经验。飞天盘古数据服务层飞天盘古分布式功能层是一个公共的基础核心，提供多副本文件（典型分布式功能层采用分布式元数据管理，支持单集群的大规模及系统的可伸缩性；提供良好设计的异常处理机制及数据复制机制，保证节点异常的性能稳定性及数据可靠性；采用端 的使用而不是底层存储介质来定义数据。软件创新使等简化的存储架构可轻松用于更多的也可以将数据的多个副本存储在对象存储、磁盘和磁带等在内的多种更为经济的存储介质可以将永久层设置为根据客户工作流程的需求进行响应，从而使用户可以创建响应副本或 国内首家发布同城三可用区域部署能力的云上对象存储，可满足企业级客户对于发生机房云盘异步复制是一种基于块存储数据复制能力实现跨地域或者跨可用区数据保护的功能， 块存储通过和阿里云密钥管理服务集成，用户可通过云盘加密功能保护数据的隐私性和自二、完善的产品矩阵属性预留空间则适用于对数据存储地域无要求，可接受仅通过外网进行数据读取访问的客.更智能：提供数据的生命周期管理与数据的智能处理能力，有效满足企业需求。.HDFS数据迁移：通过Hadoop对阿里云OSS的支持，用户便可以在自建的.视频截帧：支持截取视频中的指定位置生成图片，完成视频截帧。.安全合规：所有云盘以及快照均支持加密，满足合规要求。.批量创建云盘：基于新一代快照服务架构，可实现短期内批量创建ECS实例或者.权限组：支持基于计算实例的IP地址或网段配置文件系统读写权限规则，实现不.高吞吐，低延时：新一代并行架构，用户I/.丰富企业级特性：拥有ACL/Quota/快照等企业级数据管理能力。.弹性扩展的多层命名空间：单个文件系统的元数据能力随存储空间线性.弹性低成本：具备PB/Day规模弹性伸缩能力；支持按量付费，仅需为实际用量据源接入，支持阿里云产品/开源系统/云间/云下日志数据接入。表格存储（Tablestore）面向海量结构化数据提供Server.易集成生态丰富：全面接入开源与云原生大数据生态体系。与Maxcompute、.支持灵活计费模型：支持纯按量模式，享受0元门槛产品使用。同时支持预留模.企业级安全保障体系：提供表级别和A权和自定义权限认证及主子账号功能。同时提供网络访问控制能力与数据加密能.SQL：支持SQL查询。.其他公共云：可以为其他云服务商上的文件提供备份.领先的重删能力：备份数据重删比可达30:1,节约备份存储的消耗。.免费的高级功能：本地虚拟机云上恢复功能无需额外付费。.本地纯软部署：简易客户端安装，备份策略一键配置。.快速整机恢复：几分钟内云上整机拉起，业务快速恢复。.安全可靠：采用CRC技术对读写双向校验保障数据一致性；提供端到端的加密机制运.迁移过程监控：支持迁移进度查询，迁移流量数据监控。.迁移任务报告：支持迁移完成率统计，打印失败文件列表清单。.无需运维：提供Serverless化服务，无需关心业务运.360°权限管理：灵活的权限管理，支持团队、企业、集团公司各分支组织配置不同权 .共享与分享：支持同组织内文件共享、外部用户公网文件分享等功能。应用实践一、本地数据上云方案题不在于企业购置容量来存储全部数据，而是如何以低成本高效率的方式妥善管理数据以合规和监管要求并非企业长期保留数据的唯一动力：在英国，互联网服务商必须保留通讯.实时访问要求不高，读取数据可以接受一定的等待时间；.在整个存储周期内，需要比传统存储解决方案更低的存储单价；.使用OSS归档/冷归档/深度冷归档存储类型，可以降低归档数据的管理难度和相关管二、云灾备解决方案三、云上数据应用解决方案阿里达摩院发布的《达摩院2021十大科技趋势》认为，疫情中数字经济所展现出来的韧阿里云为在线教育机构量身定制了多个场景解决方案，.冷热分离：标准/低频/归档/冷归档/深度冷归档类型，满足从数据湖已经不是一个新概念，在提出的初期也有不少人对数据湖和传统的数仓之间的关系随着各种数据处理平台和新技术的不断发展，用户对越来越数据湖非常适合存储大量的结构化、非结构化和半结构化数据。如果场景中正在处理大量.访问控制：提供更丰富的存储访问控制策略，让数据更安全。.容器化应用和非容器化应用混合部署，技术架构平滑演进。.通过分布式的协议节点和存储节点，实现节点存储容量和性能实现弹性扩容。产品的使用，在企业业务系统架构中发挥着巨大的作用。随着云上企业使用云产品类型的四、AI模型训练解决方案