版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
算网一体技术研究及发展探讨2023年7月目录目录1算网一体提出的背景 2算网一体新技术探索 3总结与展望 2中国移动提出“算力网络”新理念中国移动提出“算力网络”新理念一年多来持续开拓创新,全力推进算力网络发展,形成一系列创新成果,在业界取得了广泛共识算力网络是以算为中心、网为根基,网、云、数、智、安、边、端、链(ABCDNETS)等深度融合、提供一
发布新理念 融入新战略成为“5G+算力网
开创新方向发布《算力网络技术白皮书》,
开启新征程发布《算力网络创新成果》;CFITI试验网与中
迈向新阶段完成CFITI试验网一期总结验收,形成案例集;发布世界最长距离400G光传输试验网络;体化服务的新型信息基础设施。——中国移动《算力网络
杨杰董事长提出“算力网络”概念与愿景
发布中国移动《算力网络白皮书》和发展倡议
络+能力中台”新型信息基础设施的关键一环
提出十大技术方向
国算力网、信息高铁三2022.12
成立算力网络子链专家委员会,成立14支攻关战队2023.3白皮书》
2021.8
2021.11 2022.1 2022.6“算网一体”是中国移动算力网络发展的深化“算网一体”是中国移动算力网络发展的深化算力网络的发展经过三个阶段的发展,逐渐深化起步阶段:泛在协同 发展阶段:融合统一 跨越阶段:一体内生编排管理
一站服务:一站开通算网服务协同协同编排网随算动
融合服务:产品融合、确定性服务统一运营:统一入口、统一平台智能编排算网融合
一体服务:多层次智简无感服务模式创新:多方算力可信交易2025~十五五阶段及更长期2025~十五五阶段及更长期2021-2023
十四五阶段
2024-20254算网一体架构及总体设计算网一体架构及总体设计算网一体通过“联合感知”“混合控制”“极致互联”构建面向智能化时代的数字基础设施联合感知混合控制网络信息联合感知混合控制网络信息拓扑信息拥塞状态算力信息CPU利用率异构算力 前提集中式控制分布式控制SLA指标算力规模 消费侧节点1节点2 节点4支撑作用任务分解与调配节点3突破RDMA长距传输瓶颈,广域吞吐敏感网络
实现广域高性能互联 CSP4CSP3CSP2CSP4CSP3CSP2CSP1ISP2极致互联 ISP1
算力路由在网计算
创新互联网架构协议,基于算网资源联合感知实现动态融合决策选路网络内生算力,基于集中式控制,实现计算任务跨云、网、边、端分布式协同5目录目录1算网一体提出的背景 2算网一体新技术探索 3总结与展望 61、算力路由:概念和技术1、算力路由:概念和技术2018年开研究算融合术,向云协同边边同的性能转”问题提出路由引入算信进行合调度 发现问题云边以及边边调度之间出现“性能反转”
问题本质计算和网络是独立系统,算的负载和网的拥塞信息没有产生关联中心云边缘节点算:中心云边缘节点
解决思路在路由中引入计算信息,进行联合调度,感知:路由:-计算负载高及网络队列
形成算力感知网络CAN边缘节点
深的条件下,边缘响应平均时延及尾时延远大于中心云-算的负载状态以及网的拥塞情况均是问题来源
造成大量计算资源的闲置网:增加带宽、配置专线...增加网络建设、运维成本通过仿真发现在路由中引入算力信息在低、中、重载情况下均有一定的优化效果批量100个客户端通过http连续访问服务端程序1、算力路由:得到国际同行高度认可1、算力路由:得到国际同行高度认可历经4年,中国移动在IETF发起成立算力路由工作组(CATS,Computing-AwareTrafficSteering)牵头在IETF召开首次算力路由研讨会sidemeeting召开第二次、第三次算力牵头在IETF召开首次算力路由研讨会sidemeeting召开第二次、第三次算力路由研讨会sidemeetingIETF113次会议,牵头召开第一次BOFIETF116次会议,牵头召开第二次BOFIETFWG中国移动担任主席2019.112020.11~2021.032022.03场景和需求达成共识2022.112023.03获取关注,凝聚初步共识讨论技术路线,工作组章程里程碑 面向AR/VR、车联等新多节部署务的景,定算路由场景需求架构准 当前,许多服务会创建多个服务实例,这些实例通常在地理上分布在多个站点。工作组主要考虑网络边缘节点如何引导服务的客户端和提供服务的站点之间的流量的问题。WGCharter/wg/cats/about/
范围基础工作:问题声明、场景、需求、技术分析等总体架构:定义、组网、功能模块等定义、基于现有协议的实现、潜在新协议需求的分析
里程碑/计划2023年7分析等基础文稿2024年7月,采纳架构文稿2025年11月,提交架构文稿至RFC发布序列81、算力路由:IETF1、算力路由:IETF工作进展 篇文稿,即在IETF117召第二会议,聚焦架构需求计算标定等 CATS架构核心组件IngressCATS-Router:Classifier(C-TC流量,决定服务节点Selector (C-PS):选择网络转发路径EgressCATS-Router:NetworkMetricAgent(C-NMA):收集和分发网络指标ServiceMetricAgent(C-SMA):收集和分发服务和计算指标CATS-controlcenter:ComputinginformationBase(C-CIB):维护细粒度的计算信息NetworkMetricinformationBase(C-NIBCalculationUnit(C-PCE):计算最合适的网络路径和选择服务节点interface:center与的接口/doc/draft-ldbc-cats-framework//doc/draft-yao-cats-awareness-architecture/
CATSWG目前的个人文稿场景:draft-yao-cats-ps-usecases-00,即将立项draft-an-cats-usecase-ai-00,CATS+AI大模型场景需求:draft-yao-cats-ps-usecases-00,draft-yuan-cats-end-to-end-problem-requirement-00draft-huang-cats-ps-and-requirements-of-l2-cats-01架构:draft-ldbc-cats-framework-01draft-yao-cats-awareness-architecture-00计算Metric:draft-du-cats-computing-modeling-description-00draft-dunbar-cats-edge-service-metrics-00其他:draft-ddcb-cats-sfc-bgp-applicability-00(sfc-bgp方案)draft-jaehwoon-cats-mobility-00(cats支持移动性方案)draft-wang-cats-green-challenges-00(cats绿色低碳考虑)draft-shi-cats-ipv6-based-con-00(cats与IPv6的应用) 91、算力路由:实践进展1、算力路由:实践进展算力路由系统的实现根据网络部署情况,支持集中式、分布式、混合式等多种组网方案。从集中式方案开始,分阶段逐步推进算力路由实验验证4总体测试方案4
阶段I集中式方案11223344551分布式:1
完成算网控制器和原型样机开发,构建业内首个集中式算力路由验证系统推进广东珠海现网试点验证,验证业务承载量提升30%以上,算网综合资源利用率提升32%以上
算网控制器算力路由网关3集中式:3用户
阶段II端到端算力路由系统验证技术方案验证开展CA-BGP等新型协议的验证测试分布式算力感知算网控制器 Restful 分布式算力感知算网控制器 Restful 分布式网络感知集中式算网一体感知集中式多策略调度算网一体感知协3算力路由转发BGP-LSTelemetryBGPSRv6PolicyBGP-FSNetconf2455CA-BGPCA-BGP算力路由网关应用APP2算力路由网关1云资源池5CA-BGP 算力路由网关CA-BGP应用APP云资源池算力路由网关算力路由网关云管理平台
分布式算力路由样机《算网一体技术体系关键技术创新案例》荣获CCSA年度“最佳实践案例”
《算力感知和算力路由构建算网一体化调度》荣获工信部2022年ICT优秀案例“卓越科技创新奖”
《算力感知和路由方案》通信世界全媒体“2023年度算力应用案例十大标杆”102、广域吞吐敏感网络:数据异地迁移的需求越来越多2、广域吞吐敏感网络:数据异地迁移的需求越来越多海量数据跨广域网传输的场景越来越多,数据异地上云、云迁移等场景的数据规模越来越大东数西存东数西算需求东数西算需求东数西渲2025年中国数据量将达到48.6ZB,其中适合东数西算的温、冷数据占比95%2025年中国数据量将达到48.6ZB,其中适合东数西算的温、冷数据占比95%数据上云需求自动驾驶训练数据上云数据上云需求自动驾驶训练数据上云单车日产数据几TB至十几TB,完成L3训练预计产生8EB数据,L4训练预计产生20EB数据综艺原始素材上云综艺原始素材总量一年达500PB,10TB~100TB量级/日/节目基因测序数据上云国内某基因企业基因测序数据年数据100PB,TB~100TB量级/次FAST观测数据上云FAST每年200+以上观测项目,产生数据15PB左右,TB~PB量级/次影视制作科学计算云迁移为保证数据的安全存储以及有效管理,云灾备市场规模不断扩大,2019年达到了32为保证数据的安全存储以及有效管理,云灾备市场规模不断扩大,2019年达到了32亿元,2023年达到了51亿元,年复合增长率约为12.4%云迁移需求多云协同计算...112、广域吞吐敏感网络:以“两高两低”为目标2、广域吞吐敏感网络:以“两高两低”为目标实现高吞吐、高可靠、低时延、低算力损耗“两高两低”特性的算网高性能互联网络广域网TCP传输吞吐受限时延由1ms增加到10ms时,吞吐下降10倍原生RDMA丢包敏感,难以直接用于广域网丢包率达到0.5%,有效吞吐接近为
广域吞吐敏感网络4个关键技术,实现长距高吞吐传输4个关键技术,实现长距高吞吐传输① 新型拥塞控制算法,提升吞吐,降低丢包② ③ 丢包精确重传机制,实现RDMA有损部署④ 数据安全加密协议,实现数据高安全传输① 人工硬盘快递:操作复杂、流程繁琐、占用人工多,且快递过程中存在硬盘损坏、丢失等风险② 在线网络传输:“低带宽等不起,高带宽用不起”,公网传输速率太慢,专网按月付费模式性价比低122、广域吞吐敏感网络技术:组网架构2、广域吞吐敏感网络技术:组网架构运营平台算网大脑实现海量数据长距传输即送即达,满足数据高效低成本搬运和安全迁移的需求运营平台算网大脑
多数据量大多资源自动分配数据源(私有云/公有云资源自动分配数据源(私有云/公有云智算/超算中心广域互联云PE云PE数据快递站弹性带宽负载均衡安全加密普算中心(机房/营业厅)
TB~PB/次快快小时达好好省省差异化差异化服务小时达数十TB/小时当日达次日达夜间空闲带宽错峰传输数十TB/小时3、数字孪生网络:典型应用场景3、数字孪生网络:典型应用场景数字孪生网络(DTN)通过网络本体与虚拟孪生体间的实时交互映射数字孪生网络(DTN)通过网络本体与虚拟孪生体间的实时交互映射,助力实现网络的全生命周期管理以及创新优化策略的低风险、高效率部署,是面向算网一体的关键技术之一数字孪生网络感知真实网络流量状态为模型训练提供充分空间,可提升路由决策的有效性策略下发前的孪生预验证,可降低对物理网络的影响
数据中心网络运维网络的高保真呈现、状态的实时监控网络流量均衡调度,异常流量识别和处理等场景网络配置预验证,网络策略的双闭环验证 中国移动某省公司数据中心网络中国移动某省公司数据中心网络3、数字孪生网络:国际标准3、数字孪生网络:国际标准 化准体系,在际标化组织ITU-T、IETF中同步推进个标项目 需求、架构、能力评估等 需求、架构、能力评估等 2020年,在牵头开启中国移动2019在ITU-TSG13完成首个标准立项2022年3月,标准为四个优秀标准之一方向成为SG13基于个DTN数据域技术要求,DTN管理和编排
2022年3月在NMRG组RFC已成为NMRG当前目前5共同推进 153、数字孪生网络:国内标准3、数字孪生网络:国内标准面向信息通信网络的业务和管理需求,面向信息通信网络的业务和管理需求,CCSATC3成立“数字孪生网络”工作子组,已凝聚国内DTN研究核心力量,推进DTN标准体系构建 工作子组研究进展 2021年10,中兴,信通院、中信科等多家单位参与已召开5次子组会议:6011个项目同步推进:4项),参与5项。2,9个项目在研拓扑建模接口规范可视化呈现数字线程孪生体管理…场景建模虚实映射网元建模数据服务数据存储数据采集系统架构隐私保护功能安全信息安全服务规范服务管理应用场景测试规范分级体系评价方法评价指标技术需求构建准则定义术语安全与合规应用与服务评价与评测架构与技术概念与需求数字孪生网络标准体系163、数字孪生网络:数据生成和优化关键技术(PAGE3、数字孪生网络:数据生成和优化关键技术(PAGE1/3) AI模型可助力构建实性高轻量、高度的但临数挑战 DTNAI建模的数据挑战真实数据缺失:且数量、类型和精度有限多源数据:AI模型
问题抽象问题设置:基于某AI模型(如模型),大规模网络评价指标:路径平均时延的预测平均绝对百分误差 面向AI模型构建,提出AutoOPT方案,过数生成优化得到质量据 数据生成(阶段1)基于历史流量数据及多样化配置,生成模拟数据生成网络配置:算法)()量矩阵()(OMNeT++,NS-3等)或AIGC技术(GPT,LLaMA等)生成模拟数据数据优化(阶段2)数据实际情形的高质量数据种子样本选择:(态/队列状态/流状态)->聚类->选择类中心&最近邻->领域知识验证增量优化:简单样OOD识验证),
阶段1 阶段2 实验结果表明通过AutoOPT可到高量数,能够提升AI模型精度和泛化能力 效果测试可扩展性(表1)数据优化的有效性(表2)
与已有方法相比结果接
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
评论
0/150
提交评论