推进云计算以及生成式AI,英伟达H100GPU已对亚马逊AWS云服务用户开放

[焦点] 时间:2024-04-30 01:59:39 来源:蓝影头条 作者:时尚 点击:99次
IT之家7 月 30 日消息,推进英伟达官网公告显示,云计I英已对亚马云服亚马逊云正式推出了由英伟达 H100 Tensor Core GPU 驱动的算及生成式新的 Amazon Elastic Compute Cloud(EC2)P5 实例。

据介绍,伟达务用该服务允许用户通过浏览器轻松扩展生成式 AI、户开高性能计算(HPC)和其他应用。推进

NVIDIA H100 GPU 的一个重要特点是其对 Transformer 的优化,这是算及生成式许多最新的先进 AI 应用所使用的关键技术,可确保 H100 在这些应用中提供更高的伟达务用性能和效率。

IT之家查询发现,户开虽然 AWS 尚未就集成 AMD MI300 芯片到其云服务中作出任何公开承诺,推进但亚马逊弹性计算云副总裁 Dave Brown 证实 AWS 正在积极考虑这一方案。云计I英已对亚马云服

英伟达表示,算及生成式开发人员和研究人员几乎每天都在借助大型语言模型 (LLMs) 发掘 AI 的伟达务用新应用,而将这些新用例推向市场需要加速计算的户开效率。

NVIDIA H100 GPU 通过架构创新提供超级计算级性能,包括第四代 Tensor Cores、用于加速 LLMs 的新 Transformer 引擎以及最新的 NVLink 技术,可以带极其可观的性能。

据介绍,EC2 P5 实例非常适合训练和运行复杂 LLMs 和计算机视觉模型的推理。这些神经网络驱动着最复杂和计算密集型的生成式人工智能应用程序,包括问答、代码生成、视频和图像生成、语音识别等

(责任编辑:知识)

    相关内容
    精彩推荐
    热门点击
    友情链接