图片来源:企业供图
在英伟达超大规模和高性能计算副总裁Ian Buck看来,想要通过生成式AI和HPC应用创造智能,就必须使用大型、快速的GPU显存来高速、高效地处理海量数据。当H200与采用超高速NVLink-C2C互连技术的NVIDIA Grace CPU搭配使用时,就组成了带有HBM3e的GH200 Grace™ Hopper超级芯片——专为大型HPC和AI应用而设计的计算模块。
从规格来看,H200将提供四路和八路H200服务器主板可选,与HGX H100系统的硬件和软件都兼容;还可用于今年8月发布的采用HBM3e的NVIDIA GH200 Grace Hopper™超级芯片。这些配置使H200可以部署在各类数据中心,包括本地、云、混合云和边缘;可为各种应用工作负载提供最高的性能,包括针对1750亿参数以上超大模型的LLM训练和推理。
架构方面,与前代相比,NVIDIA Hopper架构实现了性能跃升,如在一个700亿参数的LLM——Llama 2上的推理速度比H100(英伟达AI芯片)提高了近一倍。
根据英伟达方面的说法,将于2024年第二季度开始通过全球系统制造商和云服务提供商提供H200;服务器制造商和云服务提供商也预计于同一时间开始提供搭载H200的系统。
相关:
世界首例全眼移植手术完成 据物理学家组织网近日报道,美国纽约外科医生团队完成了全球首例全眼移植手术,尽管目前还不知道患者的新眼睛能否看清大千世界,但对那些眼睛受伤的人来说,这一医学上的突破不啻为一个巨大的福祉。 今年5..
冬季呼吸道感染性疾病高发 国家卫健委专家回应热点关切 近期,冬季呼吸道感染性疾病高发,患者多出现咳嗽、发热、肺部感染等症状。关于上述症状是病毒感染还是支原体感染成为公众关注的热点。对此,北京市呼吸疾病研究所所长童朝晖在11月13日举行的国家卫健委发布会..