超级计算机现状和我国发展规划课件

1、超级计算机现状和我国发展规划汇报内容 Outline超级计算机现状和我国发展规划国家超算天津中心及天河一号介绍未来国家超算天津中心重点研发方向与资源更新规划8/1/20222超级计算机现状和国内发展规划HPC development strategy and situation第一部分8/1/20223日本地球模拟器2019年，40TflopsIBM BlueGene/L2019年，367Tflops2019年，596TflopsIBM BlueGene/L2019年，367Tflops2019年，596TflopsCray-YMP1988年，2.3GflopsCray-1 1976 160M

2、flopsIBM红色选择2019年，3万亿次Cray T3E-1200 2019年1Tflops19831992CrayT3D1993, 19Gflops走鹃，2019年，1千万亿次天河二号2019年，5.5万万亿次2019年天河二号5.49万万亿次从1.6亿次到5.49万万亿次；38年性能提高了340000000倍39年前第一台商用巨型机问世2019超级计算机现状和发展规划TH-1A，2019年，4.7PFlops8/1/20224超级计算机现状和发展规划提高超级计算机性能的三驾马车主频、指令级并行、并行度并行度足够宽（数万结点）足够深（核间、异构、SIMD、指令级）8/1/20225超级计

3、算机是国家综合科技创新能力的基础支撑，全球各大国家均大力发展超级计算机中国近几年在大力发展超级计算机超级计算机现状和发展规划8/1/20226天河超级计算机发展Development history of Tianhe supercomputer1978年，由小平批准，国防科大开始研制“银河-1”从此，开始了中国研制超级计算机的艰难和辉煌的历程Approved by Xiao-ping DENG, the NUDT started to develop the “Milky Way -1”. From then on, began a difficult and glorious histor

4、y of Chinese Supercomputer research. 银河-1100Mflops,1983 银河-21Gflops,1990 银河-310Gflops,2019 天河一号4.7Pflops,2019 天河二号55Pflops,20198/1/20227高性能计算机 Supercomputer R&D建立协同研发的机制，集中优势力量，突破核心关键技术研制Eflops超级计算系统（1000 Pflops)高性能计算应用 HPC applications Support建立适应不同行业的国家高性能计算应用软件中心部署行业能力型重大应用软件系统的研发，构建能力型行业重大应用数值模拟

5、软件平台部署容量型普适推广应用课题，部署于国家超算中心等，培育、吸引和稳定一批自主应用软件系统的用户高性能计算环境 HPC environment Construction建立具有世界一流资源能力和服务水平的、支撑国家创新发展的国家高性能计算环境科技部高性能计算计划 : 2019-2020MOST projects on HPC: 2019-20208/1/20228国家超级计算天津中心与天河一号Introduction to NSCC-TJ & Tianhe-1A第二部分8/1/20229我国目前已投入运营的应用范围最广、综合支撑能力最强的国家级超算中心峰值4700万亿次的天河一号超级计算机

6、；400台以上服务器的通用云计算系统；容量超过10PB的海量存储系统；多领域行业软件；完善的网络基础设施；完善的机房、供电、制冷等基础设施。主要业务为高性能计算、云计算和大数据服务，目前服务的政府、企业及科研院所用户数已达600余家NSCC-TJ国家发改委“大数据技术与应用”国家地方联合工程实验室国家工信部工业云试点单位国家科技部示范型国际合作基地博士后科研工作站与多家企业和研究机构建立的联合实验室NSCC-TJ计算机技术创新广泛的应用成效天河一号国际学术界的评价Remark from international academiaCPU+GPU异构融合体系结构CPU+GPU heterogen

7、eous architecture64位多核多线程自主飞腾1000 CPU64 bits Multi-core and Multi-thread CPU自主高速互连通信技术Self-developed High-speed interconnect communication technology “天河一号”的运算速度比橡树岭国家实验室的要快大约40%，这是运算速率的极大提升。 中国同时研制了一种互联技术，让这些处理器相互联系，这不是美国的技术，而是中国自己的技术。这是一个创举。The technology belongs to China, not U.S., its a pioneeri

8、ng work - 美国田纳西大学教授杰克唐加拉Prof. Jack Dongarra, Tennessee University 中国的“天河一号”采取的CPU与GPU融合的结构，代表了未来超级计算机的发展趋势。随着计算机规模的不断拓展，这种结构虽然不是唯一的解决方法，但目前看来是最好的。The architecture is not the only solution, but the best so far - 美国斯坦福大学计算机系主任比尔戴利Billy Daley, Computer Science College, Stanford University三大技术创新Three te

9、chnical innovations石油勘探 Oil Exploration 生物医药 Biological medicine航空航天 Aero and Space craft design可控核聚变 Nuclear fusion气象预报 Weather forecast高性能计算的主要应用领域The main application area of HPC动漫设计 Animation Design高端装备制造 The high-end equipment manufacturing土木建筑设计分析 BIM金融工程 Financial Engineering基础科学研究等 Research

10、on Basic sciences超级计算的重要作用：提升国家创新能力，加速战略性新兴产业发展Improve the national innovation ability and accelerate the development of strategic emerging industries in China业内专家和用户的评价综合服务能力最强，系统最稳定，服务质量最好计算服务应用计时：140万机时/天每天运行任务数：1000存储数据规模：4.5PB服务至今已4年（2019.122019.3）2019年10月11日31日的作业运行状况天津超算中心运营情况8/1/202215天津超算中心

11、运营情况“天河一号”系统稳定运行服务，支撑国家重大科研项目超过800项国家自然科学基金项目超过600项863和973项目超过100项其他重大项目（工信部、发改委、中石油、中海油等）超过40项国际和地区项目超过10项服务全国大部分省份（包含香港地区），2019年服务用户已经超过600余家8/1/202216聚变领域研究合作合作单位：北京大学、中国科学技术大学、浙江大学、nvidia托卡马克“回旋环形等离子体代码”GTC程序的GPU开发与优化模拟规模：50,000 cores，每秒模拟的电子数达300多亿8/1/202217聚变技术开发及相关合作实际操作GTC程序移植到“天河一号”程序部署热点分析

12、Pushe: 获得网格点上的场数据，根据作用力更新电子的位置Shifte: 高度串行化计算MPI操作8/1/202218聚变技术开发及相关合作程序的具体优化策略存储器访问优化（针对pushe）针对三维访问数组进行纹理绑定合并数组增加缓存命中率CPU-GPU数据传递优化（针对pushe）临时数组直接在GPU中分配使用GPU的寄存器来存放部分数组不变数组只在第一调用kernel时传递到GPU算法优化（针对shifte）分级并行紧致化：通过分级scan方法并发执行串行代码与kernel并发执行在GPU内部使用多流，使kernel间并发执行Improve performance about 20%Im

13、prove performance about 20%; Cache hit rate from 8% to 35%; Total 3x kernel performance speedupSHIFTE gets 1.8x speedupCPU-GPU transfer time reduced to 12% of pushe kernel time.PUSHE gets 7x speedup8/1/202219聚变技术开发及相关合作512 CPU%512 GPU%speeduptotal time157.79100%62.22100%2.5field0.640.41%0.701.13%iro

14、n16.3010.33%16.1725.99%shifte31.7020.09%17.4828.10%1.8pushe94.2559.73%12.6320.30%7.5possion4.903.11%4.937.92%electron other10.006.33%10.3116.56%以512个节点为例说明GPU对electron模块的加速Profile of the CPU and GPU version for 512 MPI processes/6 openMP threads run8/1/202220聚变技术开发及相关合作Weak Scaling TestGTC总体性能有23倍的加

15、速，同时程序具有良好的可扩展性。8/1/202221聚变技术开发及相关合作合作单位：中科院等离子体所边界湍流模拟程序BOUT+在天河上的扩展性测试及分析：将BOUT+成功部署到天河系统，并进行多组扩展性测试。与美国国家能源研究科学计算中心NERSC的Edison系统进行测试比较8/1/202222聚变技术开发及相关合作测试环境对比：计算结点：NERSC-Edison: 2个12核Intel Ivy Bridge处理器，2.4GHz天河一号：2个6核Intel Nehalem处理器，2.93GHz互联：NERSC-Edison: Cray Aries with Dragonfly topolog

16、y with 23.7 TB/s global bandwidth天河一号：自主高速互联MPI实现：NERSC-Edison: 基于GCC 4.9.1(Cray Inc.)、Cray-mpich/7.0.3天河一号：基于GCC 4.4.7编译器、openmpi编译生成的mpi8/1/202223聚变技术开发及相关合作在Edison和天河一号上的测试对比Tianhe-openmpi下，CALC可以保持较好的scaling，solver的scaling最差。当进程数大于128时，在天河上使用openmpi编译的bout表现出较差的scaling，原因为solver模块中的PVODE求解器的耗时随着

17、进程数的增加反而增加。目前正在针对solver模块进一步分析导致耗时异常的代码段。8/1/202224未来国家超算天津中心重点研发方向与资源更新规划第三部分8/1/2022252019年，图灵奖获得者Jim Gray在美国国家研究理事会计算机科学和远程通讯委员会（NRC-CSTB）的演讲报告中提出了科学研究“第四范式”第一范式：实验科学研究范式描述自然现象，主要以观察和实验为依据的研究第二范式：理论科学研究范式主要以建模和归纳为基础的理论推导与分析研究第三范式：计算科学研究范式主要以模拟仿真复杂现象为基础的计算科学研究第四范式：数据科学研究范式以数据考察为基础，联合理论、实验和模拟一体 的数据

18、密集计算处理研究高性能计算、大数据和云计算融合技术Fusion Tech. of Big Data and HPC, CC at NSCC-TJ8/1/2022天津超算中心运营情况8/1/2022高性能计算、大数据和云计算融合技术Fusion Tech. of Big Data and HPC, CC at NSCC-TJ大数据硬件技术与环境建设的核心为数据分析和数据挖掘，通过云计算虚拟与集成技术实现大数据的采集与应用服务，通过高性能计算配合数据挖掘算法实现大数据的分析处理，通过层次式动态可扩展存储系统实现海量数据的高效存储。大数据与云计算和超级计算融合技术：基于超级计算与云计算的大数据处理与应用建模示意图8/1/202228高性能计算、大数据和云计算融合技术Fusion Tech. of Big Data and HPC, CC at NSCC-TJ8/1/202229近期中心系统资源规划配置一组天河二号机柜新的互连