阿里云体系架构.ppt

阿里云体系架构 1级架构图 门类齐全的云服务产品 满足用户存储 计算 数据库 大数据分析的需求 以飞天大规模分布式计算系统为平台支撑 统一管理集群的系统资源 控制分布式应用的运行多用户的运行环境 资源共享 安全隔离 Linux 数据中心DataCenter 基于Kerberos的用户认证 基于权能机制的访问控制和授权 提供点对点的进程间远程调用服务 支持通讯信道的数据压缩和一致性校验 提供命名服务 状态同步服务和分布式锁服务 调度和分配集群的内存和计算等资源 管理进程的生命周期和资源使用 确保多用户之间公平有效地共享集群资源 分布式文件系统DistributedFileSystem 任务调度JobScheduling 一个10PB级别 上亿个文件的文件系统提供类POSIX的API支持随机读 追加写 面向海量数据处理和大规模计算类型的复杂应用 提供了灵活高效的数据驱动的多级流水线并行计算框架 开放存储服务 OSS 开放结构化数据服务 OTS 开放数据处理服务 ODPS 弹性计算服务 ECS 关系型数据库服务 RDS AliyunAPI 以绿色高效的云数据中心和大规模Linux服务器集群为基础 资源管理ResourceManagement 安全管理SecurityManagement 远程过程调用RemoteProcedureCall 分布协同服务DistributedCoordinationService 飞天大规模分布式计算系统 Apsara 阿里云体系架构 1级架构图 阿里云的技术层次 云计算 大数据 阿里云系统架构 阿里云技术架构 阿里云的产品体系 分布式文件系统 一层结构 分布式文件系统 盘古 客户端主要为 ECSOSS OSAODPS OpensearchOTS SLS 分布式文件系统 二层结构 Paxos 任务调度系统 伏羲 物理部署示意图 IAAS基础服务 ECS弹性服务器 IAAS基础服务 SLB负载均衡 IAAS基础服务 ESS弹性伸缩服务 IAAS基础服务 OSS基础架构 协议接入层RESTful LB LVS 数据访问层Key Value引擎 持久存储层Pangu 负载均衡 协议处理 访问控制 分区 索引 持久 冗余 容错 RESTful协议处理资源使用计量防攻击策略授权 认证 海量 分布式的KV存储可扩展至数千台服务器KVMaster KVServer Nuwa 基于分布式文件系统PanguMaster Slave 基于Paxos的多Master设计 三份拷贝分布不同机架存储 IAAS基础服务 OSS基础架构 IAAS基础服务 OSS实现云端数据处理 上传文件到OSS后 可以配合使用媒体转码服务 图片处理服务 批量计算服务 离线数据处理服务 ODPS 挖掘数据的价值 阿里云体系架构PAAS 开放表格服务OTS OTS是构建在阿里云飞天分布式系统之上的NoSQL数据库服务 提供海量结构化数据的存储和实时访问 OTS以实例和表的形式组织数据 通过数据分片和负载均衡技术实现规模上的无缝扩展 应用通过OTSAPI或者操作管理控制台来使用OTS服务 阿里云体系架构PAAS 开放表格服务 大规模 基于阿里云云操作系统通用性 支持表 视图 事务 增删更新查等功能 支持partition primaykey高可用 通过自动故障迁移来提供高可用性 通过存储的冗余备份来确保数据的安全 实时性 支持实时的数据插入 删除和更新 支持实时的随机查询 范围查询和偏移查询 并可通过视图和分页的方式让查询更高效 一致性 通过数据分区内的事务 使得数据的更改和查询保持强一致性宜用性 通过提供多语言SDK 包括C Python C 等 让用户的开发更便捷 经济性 仅按用户的实际资源使用进行计费 PAAS 开放表结构服务 OTS PAAS 大数据计算服务ODPS功能组成 PAAS 大数据计算服务ODPS架构图 PAAS 大数据计算服务ODPS多数据中心 PAAS 大数据计算服务多租户 PAAS 大数据计算服务 数据交换 PAAS 云数据库服务 RDS 云数据库 关系型数据库服务 是一种稳定 可靠 可弹性伸缩的在线服务数据库 在线的关系数据库服务即开即用支持四种DB引擎 MySQL SQLServer postgreSQL PPAS支持在线的扩容 备份回滚 性能监控和分析等功能 RDS采用主从备份架构 具有高可用和数据可靠性 PAAS 云数据库服务 RDS总体架构 PAAS 云数据库服务 RDS 数据量性能瓶颈 单实例最大14000IOPS 25000OPS 承载2T PAAS 云数据库服务 RDS PAAS中间件 分布式关系数据库DRDS 分布式关系数据库DRDS 是一种水平拆分 可平滑扩缩容 读写分离的在线分布式数据库服务 DRDS使用中间件产品 PAAS中间件 分布式关系数据库DRDS PAAS中间件 分布式关系数据库DRDS PAAS中间件 分布式关系数据库DRDS PAAS中间件 分布式关系数据库DRDS Paas中间件 分布式关系数据库DRDS 功能栈 PAAS中间件 分布式关系数据库DRDS 读写分离 PAAS中间件 DRDS 分库分表 PAAS中间件 DRDS 分库分表 分库ID 分表Gender PAAS中间件 DRDS SQL路由 Select