英伟达与微软宣布合作构建大规模AI超级计算机用于企业AI和云服务。
英伟达公司和微软公司宣布建立合作伙伴关系,将构建一台优化用于运行人工智能软件的超级计算机,该计算机将在微软的Azure公有云平台上实施。英伟达企业计算副总裁Manuvir Das表示:"人工智能技术的进步以及行业采用速度在加快。基础模型的突破掀起了一股研究浪潮,催生了新兴创业公司,并推动了新的企业应用。我们与微软的合作将为研究人员和公司提供最先进的人工智能基础设施和软件,以充分发挥人工智能的变革力量。"
微软将为Azure配备数万个英伟达图形处理器,这些处理器因其能够加速人工智能和科学应用而在超级计算机中被广泛使用。这些系统将把GPU与英伟达的多项其他技术配对,包括Quantum-2系列网络交换机。虽然Azure已经包含由英伟达A100芯片驱动的多个计算实例(这是该公司2020年推出的旗舰数据中心图形卡),但这项合作将推出由H100驱动的Azure云实例。H100是英伟达当前的旗舰数据中心GPU,于3月首次推出。H100拥有800亿个晶体管,训练人工智能模型的速度比上一代A100图形卡快6倍,并针对运行Transformer模型进行了优化——这是一种广泛用于自然语言处理的先进神经网络。Quantum-2 InfiniBand交换机系列每个网络端口每秒可处理400吉比特流量,是英伟达前一代硬件的两倍。
软件优化是此次合作的重要关注点。微软和英伟达将优化微软的开源DeepSpeed工具包,使其在H100图形卡上运行。开发人员使用DeepSpeed工具包来降低神经网络的基础设施需求。优化工作将集中在帮助开发人员通过H100内置的Transformer Engine功能加速采用Transformer神经网络架构的人工智能模型,该功能通过减少神经网络完成计算所需处理的数据量来实现加速。英伟达AI企业版(该公司的软件平台,帮助企业在其芯片上运行人工智能应用,包括针对生成购物推荐等任务优化的预配置神经网络)也将获得在Azure新型H100驱动实例上运行的认证。
微软Cloud + AI Group执行副总裁Scott Guthrie表示:"我们与英伟达的合作释放了世界上最具可扩展性的超级计算机平台,为Microsoft Azure上的每个企业提供最先进的人工智能能力。"作为合作的一部分,英伟达将扩大对Azure的使用,利用Azure实例支持其在生成式人工智能领域的研究工作。该芯片制造商在这一领域进行了大量投资,于10月推出了MT-NLG,这是一个具有530亿参数的生成式人工智能系统,当时被誉为同类产品中最强大的。