“AI的iPhone时刻”系列9:NVLink+NVSwitch,实现GPU间高速互联!

“AI的iPhone时刻”系列9:NVLink+NVSwitch,实现GPU间高速互联!
2023年04月06日 10:39 同花顺

  【广发电子许兴军团队】“AI的iPhone时刻”系列9:NVLink+NVSwitch,实现GPU间高速互联! NVLink:实现GPU间高速直联。NVLink是一种GPU之间的直接互联,可扩展服务器内的多GPU输入/输出。2016年,第一代NVLink搭载基于Pascal架构的Nvidia GP100 GPU发布,其传输速率可达160GB/s;目前NVLink已迭代至第四代,总带宽可达900GB/s,是PCIe 5.0带宽的7倍。NVLink不仅可实现NVIDIA GPU间互联,也可以实现GPU与CPU之间的互联(CPU需要支持NVLink协议,如IBM POWER9)。 NVSwitch:实现服务器内更高带宽、更低延迟、更多GPU间通信。第一代NVSwitch在2018年GTC大会发布,其上有18个NVLink端口,在单服务器节点内通过12个NVSwitch可以实现16个V100以NVLink能够达到的最高速度进行多对多通信。目前NVSwitch已经迭代到第三代,单芯片上共有64个第四代NVLink端口,支持GPU间900GB/s的通信速度,这些通过NVLink Switch互联的GPU可用作单个高性能加速器,拥有高达15petaFLOPS的深度学习计算性能。 服务器之间的NVLink与NVSwitch:实现服务器节点间通信拓展。基于第三代NVSwitch,通过在服务器外部添加第二层NVSwitch,NVLink网络可以连接多达32个服务器、256个GPU,并提供57.6TB/s的多对多带宽,实现GPU在服务器节点间通信扩展,形成数据中心大小的GPU。 AIGC推动AI服务器需求增长,建议关注GPGPU/ASIC/CPU厂商:海光信息(与计算机组联合覆盖)、寒武纪(计算机覆盖)、龙芯中科芯原股份等;服务器芯片厂商:澜起科技源杰科技杰华特深科技等;服务器硬件厂商:工业富联沪电股份胜宏科技等。AIGC应用:大华股份国光电器漫步者等 欢迎各位领导随时交流! ——————————————— 广发电子 许兴军/耿正/栾玉民

  作者利益披露:转载,不作为证券推荐或投资建议,旨在提供更多信息,作者不保证其内容准确性。

炒股开户享福利,送投顾服务60天体验权,一对一指导服务!
海量资讯、精准解读,尽在新浪财经APP
NVLink gpu iPhone 通信 带宽

VIP课程推荐

加载中...

APP专享直播

1/10

热门推荐

收起
新浪财经公众号
新浪财经公众号

24小时滚动播报最新的财经资讯和视频,更多粉丝福利扫描二维码关注(sinafinance)

7X24小时

  • 04-06 光大同创 301387 58.32
  • 04-06 恒尚节能 603137 15.9
  • 04-06 索辰科技 688507 245.56
  • 04-06 迪尔化工 831304 3.98
  • 04-06 森泰股份 301429 28.75
  • 产品入口: 新浪财经APP-股票-免费问股
    新浪首页 语音播报 相关新闻 返回顶部