系统的架构设计

1、实用标准文案技术架构技术架构总览业务框架技术方案运营监控治理安全防范接入层前后台分离动静分离预处理业务量监控流量切换Https接入接口层服务网关，路由分发业务链订单服务层产品资源供应商数据层数据存储微服务/组件MQ异步/离线MapReduceSSOAIDB水平扩充/ 读写分离HDFS黑白名单API SLA日志收集调用栈服务器状况灰度隔离/降级动态规划Oauth认证Hystrix 熔断安全巡检身份认证IP限制精彩文档技术方案前台技术架构W根据用户设备及浏览器尺寸路由疋疋;义义JSCSSResourceHtml5组样 件式*js , *.vue*sass , *cssFont, ImgFont,

2、Img系统构建： Webpack , Gulp实用标准文案技术方案微服务架构结合现实情况，平台服务计划分二个阶段完成，先完成服务化，后续在服务化的基础上重构成微服务第一步：服务化Load Bala ncer服务提供者服务注册中心服务提供者-zookeeper服务提供者服务监控基础服务框架spri ng bootWebserverWebserver业务代码业务代码业务代码报警分布式RPC服务框架dubbo异构语言服务提供者服务提供者服务提供者实时数据监控服务注册中心Proxy业务代码业务代码业务代码zookeeper集群暂停用户订单商品服务发布容器服务服务服务服务提供者服务提供者服务提供者恢复d

3、ocker业务代码业务代码业务代码下线持续集成工具jenkins服务治理用户订单商品服务依赖调用链路服务流量性能瓶颈SLA分析历史信息精彩文档技术方案动静分离-CDN静态数据返回用户CDN数据库丿ECS（服务器）动态数据 结果返回用户动态 请求数据内网访问， 数据更新维护用户静态 数据请求静态脚本附件图片视频音频 OSS（云存储服务）丄回源请求 抓取数据静态资源访问加速静态资源文件（html , css , js , img等）业务静态图片智能压缩对静态资源进行压缩，减少传输大小， 加速分发效果可视化监控可通过视化监控管理，查看监控日志和 统计分析制定合适的缓存策略，并可通 过从源站刷新缓存等

4、手段主动维护高访 问资源的缓存实用标准文案技术方案负载均衡+弹性扩 展四层DDoS攻击防护，支持应用防火墙和CC防护，提供防护统流量调度计页面，实时抵御网络攻击多台云服务器自动进行流量分发，获得更高水平的容错性能扩展性支持云服务器动态扩展，实现无缝伸缩，伸缩过程不用更换任何设备，对相关调用和访问者零影响安全精彩文档实用标准文案前期方案(S负载均衡云服务器ECS云服务器ECS云服务器EC Si.a负载均衡云服务器ECS负载均衡云服务器ECS云服务器-ECS实用标准文案技术方案消息系统消息队列采用阿里云MQ消息发送/发布方消息接收/订阅方消息持久消息状态TCP UDP HTTP SOAP 1 F元

5、数据消息接收器流入路由器扌二截器消息 转换器内部服务 组件调用H扌二截器/组件容器流出路由器消息发送器精彩文档实用标准文案客户接入数据客户效果数据I推荐请求APIOTS物品实时修正表推荐处理线OTS离线计程OTS用户实时修正表API返回技术方案推荐引擎基于阿里云的RecEng（推荐引擎）和 MaxCompute（大数据计算服务）搭建金豆云推荐引擎，实现千人千面推荐建模流程基本推荐流程OTS离线计算结果表算结果衣精彩文档实用标准文案离线计算在线计算精彩文档实用标准文案内部系统内部系统采单点登陆方式进行管理JI供应系统技术方案用户认证 SSO + 0Auth2外部系统!外部系统连接主要分为2种方式

6、：1. 通过ROF平台实现数据交互2. 金豆云提供0Auth2认证机制给第三方，实现页面与数据的交互Request User Url跳转用户授权生成Auth Code请求 Access Token k1Request Access Url生成 Access Token请求用户OpenIDRequest Info Url生成OpenID精彩文档微店系统获取用户资源通过 token、openld 及 API实用标准文案实用标准文案技术方案分析平台Spring , SpringMVC, JMS Sqoop事件监听定时任务数据导入Spark数据分析数据融合API 接口MQ肖息队列?分析平台基于业务数据

7、进行数据映射与融合?整体架构基于大数据分析框架设计，并通过模块化 设计进行内部解耦，将数据收集，导入及分析功能 围绕分析模型系统处理?业务数据收集工作通过异步消息及定时导入方式实现?底层技术实现?前端主要提供 REST API供产品平台进行数据获取。同时采用Echarts或CuBI进行报表展现?中台服务逻辑层使用 Spring，SpringMVC作为应用构建及 对外接口发布，配合 MC队列机制处理异步消息。Spark作 为核心数据处理引擎，进行 MapReduce处理?持久层主要采用HBase进行大数据存储，同时使用Hadoop HDFS支持分布式存储精彩文档实用标准文案技术方案数据库设计原则

8、统一数据视图保证数据的及时性、准确性、完整性数据应用分离应用系统只依赖逻辑数据库匚业务彳数据库*J(Master)J业务数据库(Slave)广1Mongo4MongoDBDBMaster、一 、一SlaveHBase数据读写分离应用系统不直接访问其它宿主的数据库，只能通过服务访问访问量大的数据库做读写分离 数据量大的数据库做分库分表 不同业务域数据库做分区隔离 重要数据配置备库；报表数据库4合理使用缓存?产品平台数据库设计方案采用二级缓存机制? 一级缓存使用Redis副本集，对频繁访问数据进行缓存。同时围绕Redis单线程机制，针对大量并发场景设计了同一用户的并发锁策略。? 二级缓存使用Mon

9、goD副本集，对结构化数据及频繁更新数据进行文档化数据存储?业务数据库使用MySQI集群方案?分析平台基于大数据架构设计方案，数据库使用区域HBase部署策略，同时采用Hadoop HDFS进行分布式文件存实用标准文案技术架构-运营监控流量控制11.分流水平 扩展应用：集群，无状态，提高访问量水平 扩展数据：读写分离，提高性能业务分区应用：按业务域划分成不同子系统 数据：数据分区应用：不同业务类型分片数据：分库分表，提高数据容量三应用：分层，功能与非功能分开数据：冷热数据分离分片动静分离无法缓解大流量1页面降级1. 动态页面降级到静态2. 整体降级到其他页面3. 页面部分内容Nginx前端限制

10、2.降级11业务功能降级舍弃一些非关键业务， 如购物车库存状态3.1限流应用系统限流应用系统降级降级一些下游系统，无法缓解客户端限流i如一次拆分暂停大流量服务端限流精彩文档数据降级远程服务降机到本 地缓存数据库限流多线接入，0M技术架构-运营监控SLA 数据持久性数据可销毁性不低于 99.9999999%数据无法恢复 数据可迁移性数据私密性迁入迁出网络层访问控制技术实现对不冋用户资源的隔离 服务可用性 数据知情权不低于99.95%对于数据、备份数据所在数据中心地理位置、数据备份数量具有知情权故障恢复能力服务资源调配能力用户可在10分钟内启用或释放100台云服务7X 24小时的运行维护器，或在5

11、分钟内完成停机升级CPU和内存，并支网络接入性能持在线实时升级公网带宽服务提供方SLA服务消费方技术架构-治理灰度发布Clie nt老系统老系统DBA转发新系统 :新系统DB部分请求到旧系统上，另一部分请求到了新的灰度系统上.走到 旧系统的请求，还是照原样处理.走到了新版灰度系统的请求， 需要同时将请求转发给旧系统上来对应的接口上修改旧系统的数 据.如果走到新系统的请求查不到该用户的数据，还需要首先同 步一份来新系统上Clie ntA服务新版A服务请求首先走到了新版本需要灰度的服务A上，在经过该服务处理后， A,由于带上了 tag，后续访问的都是配套灰度 给请求打上了 tag的C服务B服务B服务Tag ATag A实用标准文案新版C服C服务 务精彩文档实用标准文案技术架构-安全安全策略精彩文档2 黑白名单1 Https接入3 OAuth2 认证使用 Spring-security-oauth2实现与第三方系统认证授权数据传输入过来加密，