NVIDIA 云原生超级计算：释放云端超算极致性能

       从人工智能、基因测序到仿真模拟、气象海洋预报，一直以来高性能计算(HPC)应用越来越普及，其覆盖领域也迅速扩展。随着IT技术的发展，尤其是开放架构和开源的日渐成熟，超算正与大数据、人工智能等技术加速融合，由此带来存储容量大、存储类型复杂、云原生部署需求等多方面的挑战。

       值得关注的是，由于云端上的应用程序通常以分布式资源的方式运行，因此当超算被搬到云端后，势必面临多租户运行的复杂环境。由于超算本身就是为了解决应用的算力需求，那么如何缓解云端的多任务、多租户资源分配，保证用户获得最佳性能，则是超算迈向云端时必须解决的问题。对此NVIDIA推出了云原生超级计算架构，以BlueField DPU为“智慧大脑”让用户获得极致性能，以更好地赋能创新，助力新场景应用。
时不我待，云原生超级计算成为新引擎

       通常情况下，数据中心中各个角色泾渭分明：由CPU处理应用，GPU对应用进行加速，再通过网络搭建成一个大规模的数据中心。但在面对大规模的算力需求的时候，CPU除了完成自己的计算任务外，还需要“加班”去处理通信、存储、安全等任务，并平衡各个任务所需要的资源。这个时候，影响整体性能的“系统噪声（Background Noise）”就随之产生了，这是现有架构不可避免的短板。

       但若是以DPU进行软件定义网络、存储和网络安全加速功能，让DPU来优化和同步不同工作之间的资源分配，或者通过DPU来实现计算和通讯的异步操作，包括计算和存储的异步操作，则可以消除干扰，提升系统整体性能。
       NVIDIA 网络亚太区高级总监宋庆春介绍到，这也是为什么云原生超级计算被青睐，成为数据中心新架构的原因。通过将DPU、GPU、CPU三位一体构成一个新型数据中心架构，可以通过更低的成本或者更少的硬件构建更高性能的系统。
       为提供更出色的性能，在NVIDIA云原生超级计算平台中，包含了NVIDIA BlueField DPU、InfiniBand网络、NVIDIA DOCA和Magnum IO。其中关键的是 NVIDIA BlueField DPU (数据处理器) 和高速、低延迟的 NVIDIA Quantum InfiniBand 网络。

       一方面，NVIDIA BlueField DPU 将先进的 NVIDIA ConnectX 网卡、配备PCIe子系统的Arm核心和定制设计的高性能计算硬件加速引擎相结合，可以针对通信和计算并行任务进行高度重叠处理，减少操作系统的“系统噪声（Background Noise）”，显著提高应用程序性能。另一方面，NVIDIA Quantum InfiniBand 网络可加速并卸载数据传输，确保不会因数据或带宽限制而导致计算资源不足，并且NVIDIA Quantum InfiniBand 网络可以在不同的用户或租户之间进行分区，提供安全性和服务质量 (QoS) 保证。值得一提的是，借助 DOCA和MAGNUM IO，开发者可以通过创建高性能、软件定义和云原生 DPU 加速的服务，对未来的超级计算基础设施进行编程。

多维优势，重塑数据中心和云计算未来

       实际上，NVIDIA的云原生超级计算解决方案已经获得业内诸多殊荣，也是最新的超级计算大会榜单上的常客：

       ·TOP500榜单的前一百名，InfiniBand网络占到63%；

       ·Green500的TOP100榜单，InfiniBand网络占到75%；

       ·InfiniBand网络加速195个系统，与2021年11月TOP500榜单相比增长9%；

       ·NVIDIA InfiniBand网络和Hopper GPU以65.09 GF/W排名Green500第一。

       从上述一系列“成绩单”可以看出，无论是TOP500榜单还是Green500榜单中，应用NVIDIA加速计算或者NVIDIA网络已经成为趋势，宋庆春介绍采用NVIDIA InfiniBand网络或采用NVIDIA InfiniBand网络加NVIDIA GPU的超级计算系统表现出众，且每年系统数量都在增长。
       宋庆春表示通过NVIDIA BlueField DPU和NVIDIA DOCA，可以运行各种加速库，比如专门面向集合操作的UCC，专门面向点对点的UCX，专门面向存储、专门面向性能隔离专门面向网络编排的加速库，用于加速各种计算方面的业务，能够和标准的File System或者Scheduler或者存储框架直接给应用提供标准接口，在用户无感知的情况下实现加速并享受到加速的优势。

       对此，宋庆春演示了DPU/DOCA如何加速通信流程的实例，当Host发一个通知到DPU 后，DPU在收到通知后会和远端DPU进行沟通，随之直接在本地Host Memory和远端Host Memory建立通信通道，实现数据之间的传递。整个通信过程中，所有操作都由 DPU APP 监视，不需要CPU参与，CPU只是发出通知，由DPU进行管理和执行。
       此外，宋庆春强调云原生超级计算离不开的交换机计算SHARP技术，这是迄今为止英伟达独有的技术，在交换机上可进行数据的Aggregation和Reduction，消除网络拥塞，突破网络物理带宽的限制。
       可以看出，云原生超级计算将高性能计算的强大性能与云计算服务的安全性和易用性融于一体，可以简单安全地提供裸机性能、用户管理和隔离、数据保护和按需高性能计算以及AI服务。例如困扰用户的性能隔离问题，NVIDIA Quantum-2 InfiniBand 平台提供创新的主动监控和拥塞管理，以实现流量隔离，几乎完全消除性能抖动，确保可预测的性能，就像应用程序在专用系统上运行一样。

激发创新，2022秋季DPU中国黑客松竞赛回顾

       继第一届 DPU 中国虚拟黑客松（Hackathon）竞赛在2022年4月16日至17日圆满收官之后，NVIDIA于2022年10月22日至23日发起并主办了2022秋季DPU中国黑客松竞赛。NVIDIA 网络技术专家崔岩介绍本次秋季DPU中国黑客松竞赛从8月开始进行筹备工作，9月12日开始官方招募，总共27支团队注册报名参赛，13支团队参加最终比赛，包括51位开发者，6位女性开发者。10月19日针对这些参赛队伍和中国DOCA社区开发者，NVIDIA提供了一次黑客松训练营，总共吸引超过3,500人参与，上万人次的观看。10月22日正式开启比赛，比赛是二十四小时竞赛时间，参赛团队会在此期间按照设立的项目去做相应的开发。
       谈到本届和上届在选题上的区别，崔岩表示NVIDIA BlueField DPU和NVIDIA DOCA在云原生超级计算架构里面也是一个关键组成部分，所以在这二十四小时的竞赛中，NVIDIA要求参赛团队围绕使用NVIDIA BlueField DPU和NVIDIA DOCA实现RDMA加速存储与AI的解决方案。

       最终，SDIC 团队项目获得了一等奖，其项目名称是《基于BlueField DPU数据中心 RDMA虚拟化的研究》，主要是基于VirtIO的方案。由于VirtIO是IO 半虚拟化的解决方案，也是一套通用的 IO 设备虚拟化程序，所以会对半虚拟化IO设备进行抽象，可对上层应用和各种Hypervisor虚拟化设备提供通信框架和编程接口，减少跨平台带来的兼容性问题，提高驱动程序的开发效率。

       在崔岩看来，DPU中国黑客松是开发者学习、实践使用NVIDIA DOCA软件开发套件的一个很好的活动平台，参赛者可以基于NVIDIA BlueField DPU去进行各种数据中心应用程序的开发。参赛团队可以利用DOCA驱动、DOCA库、开发工具和相关文档构建、优化NVIDIA BlueField DPU，去做基础设施相关的加速应用开发，在此过程中展现他们的奇思妙想、创新精神和团队气质，也为未来基于NVIDIA BlueField DPU的持续创新提供了源头活水。