SC21 | 全球最快超级计算机正飞速发生变化
2021-11-19 15:07
#人工智能 #深度学习 #GTC21
分享到微信
分享到微博
随着最新一代超级计算机日益与人工智能和云计算相结合，衡量这些机器的方式也在发生变化。
从科学模拟、可视化、数据分析再到机器学习，各种现代计算的工作负载正在推动超级计算中心、云服务提供商和企业重新思考他们的计算架构。
仅靠处理器、网络或软件优化已经无法满足研究人员、工程师和数据科学家的最新需求。
数据中心取而代之，成为新的计算单元，因此企业必须关注整个技术堆栈。
全球最强系统的最新排名显示，在新一代超级计算机中，这种使用全栈方法的趋势还在持续。
在本周SC21高性能计算大会上最新发布的TOP500榜单上，NVIDIA技术为355套超级计算机系统提供加速，占榜单的70%以上，而新增系统中90% 以上都采用了NVIDIA 的技术。对比6月份发布的TOP500榜单上342个系统（占榜单68%）使用NVIDIA技术，增长趋势明显。
NVIDIA在全球最节能系统Green500榜单上也继续保持领先优势，占据了榜单排名前25名系统中的23套，与6月份持平。平均来看，采用NVIDIA GPU的系统能耗效率比非GPU系统高3.5倍。
来自微软的GPU加速Azure超级计算机在榜单上排名第十。这是基于云的系统首次跻身前10名，新一代云原生系统就此崭露头角。
人工智能正带来一场科学计算的革命。近年来，研究高性能计算和机器学习的论文数量激增，从2018年的约600篇增长到2020年的近5000篇。
包括HPL-AI和MLPerf HPC在内的新基准也强调了高性能计算和AI工作负载的持续融合。
作为一个融合了高性能计算和人工智能工作负载的新基准，HPL-AI使用了深度学习和许多科学与商业工作的基础——混合精度计算，同时还提供高性能计算基准传统的标准标尺——双精度计算的高度准确性。
MLPerf HPC基准适用于通过人工智能实现超级计算机模拟加速和增强的计算方式，主要被用来测试高性能计算中心天体物理学(Cosmoflow)、天气(Deepcam)和分子动力学(Opencatalyst)三大关键工作负载的性能表现。
NVIDIA通过GPU加速处理、智能网络、GPU优化应用程序和支持AI和高性能计算融合的库来解决整个堆栈的问题。这一方法提升了工作负载的性能表现，并推动了科学突破。
让我们来具体看一看NVIDIA是如何助力超级计算机实现性能提升的。
GPU的并行处理能力再加上超过2500个GPU优化应用程序，在多数情况下可以让用户把高性能计算任务的时间从几周减少到几个小时。
NVIDIA一直在优化CUDA-X库和GPU加速应用程序，所以用户如果发现自己的GPU架构性能突然有了提升也很正常。
因此，应用范围最广的科学应用程序（我们称之为“黄金套件”）的性能在过去6年里提高了16倍，而且还在不断提升。
图注：全栈创新带来顶级高性能计算、人工智能和机器学习应用程序的16倍性能提升。
为帮助用户快速提升性能，NVIDIA通过NGC目录中的容器提供最新版本的人工智能和高性能计算软件。用户只需在数据中心或云端的超级计算机上拖拽并运行应用程序即可。
人工智能在高性能计算中的应用能帮助研究人员加快模拟速度，同时保持传统模拟方法的准确性。
为此，越来越多的研究人员开始利用人工智能来加快研究的速度，比如今年超算领域最有声望的戈登·贝尔奖（GordonBell prize）决赛的四组晋级团队。各大企业正在竞相建造E级人工智能计算机，以支持这种融合高性能计算和人工智能的新模式。
一些相对较新的基准（如HPL-AI和MLPerf HPC）也印证了这一趋势，强调了高性能计算和AI工作负载的持续融合。
为推动这一趋势，上周NVIDIA推出了一系列用于高性能计算的先进的新的库和软件开发工具套件。
图是现代数据科学中的一个关键数据结构。通过一个名为深度图库（DGL）的新型Python包，用户现在可以把图投影到深度神经网络框架中。
NVIDIA Modulus构建并训练了一个内嵌物理信息的机器学习模型，可以用来学习并遵循物理定律。
ReOpt – 可提高规模高达10万亿美元的物流行业的运营效率。
cuNumeric – 为Python社区的科学家、数据科学家、机器学习和人工智能研究人员加速NumPy。
NVIDIA的虚拟世界模拟和3D工作流协作平台NVIDIA Omniverse负责把一切整合到一起。
Omniverse可用来模拟仓库、工厂、物理和生物系统、5G边缘、机器人、自动驾驶汽车甚至是虚拟形象的数字孪生。
NVIDIA上周宣布，将利用Omniverse构建一台名为Earth-2的超级计算机，通过创建一个数字孪生地球来预测气候变化。
随着超级计算机在数据分析、人工智能、模拟和可视化方面承担越来越多的工作负载，CPU不得不在大型复杂的系统上支持更多的通信任务。
DPU（数据处理器）可以卸载多种操作，有效减轻这一压力。
作为一个完全集成的片上数据中心平台，NVIDIA BlueField DPU可以卸载和管理数据中心的基础设施任务，释放主机的处理器资源，从而实现更强的安全性和更高效的超级计算编排工作。
与NVIDIA Quantum InfiniBand平台相结合，该架构可提供最佳裸机性能，同时原生支持多节点租户隔离。
图注：NVIDIA的Quantum InfiniBand平台提供可预测的裸机性能隔离。
NVIDIA的Quantum InfiniBand平台提供可预测的裸机性能隔离。并且采用零信任安全防护，因而这些新系统也更加安全。
BlueField DPU将用户应用与基础设施任务隔离开来。最新的BlueField软件平台NVIDIA DOCA 1.2支持下一代分布式防火墙和更广泛的线速数据加密。而NVIDIA Morpheus则会假设入侵者已经进入数据中心，将利用基于深度学习的数据科学来实时检测入侵者的活动。
上周NVIDIA还发布了NVIDIA Quantum-2。这是一个400Gbps InfiniBand平台，由Quantum-2交换机、ConnectX-7网卡、BlueField-3DPU以及用于新网络架构的软件组成。
NVIDIA Quantum-2提供了裸机高性能和安全多租户优势，可以让下一代超级计算机实现安全性、云原生以及更高的效率。
分享到微信
分享到微博
