Jaeaiot捷易科技-日本在线一区二区三区-英伟达AI显卡模组/日本在线天堂/GPU整机服务器供应商

GPU與GPU 通過NVLink連接
發(fā)布時間: 2023-10-24 10:35

GPU與GPU 通過NVLink連接

下圖顯示了一個包含兩個完全NVLink連接的GPU四聯(lián)體的8-GPU混合立方體網(wǎng)格,四聯(lián)體之間的NVLink連接以及每個四聯(lián)體內(nèi)的GPU直接通過PCIe連接到各自的CPU。通過使用單獨的NVLink連接跨越兩個四聯(lián)體之間的間隙,可以減輕對每個CPU的PCIe上行鏈路的壓力,并且避免通過系統(tǒng)內(nèi)存和跨CPU鏈接路線路由傳輸。

八GPU混合立方體網(wǎng)格架構(gòu)

注意,8-GPU混合立方體網(wǎng)格的每一半都可以作為共享內(nèi)存多處理器運行,而遠程節(jié)點也可以通過對等DMA共享內(nèi)存。由于所有GPU到GPU的流量都通過NVLink進行,因此PCIe現(xiàn)在完全可用于連接到NIC(未顯示)或用于訪問系統(tǒng)內(nèi)存流量。這種配置通常適用于通用的深度學習應用程序,并已實現(xiàn)在NVIDIA的新DGX-1服務器中。

下圖展示了一個四個GPU的集群,其中每個GPU都通過單個NVLink連接到其對等方。在這種情況下,對等方可以雙向通信,達到40 GB / sec的雙向帶寬(雙重鏈接的雙向帶寬為80GB / sec),從而實現(xiàn)GPU之間的強大數(shù)據(jù)共享。

使用PCIe連接CPU,NVLink連接四個GPU

3.1.2. CPU與GPU通過NVLink連接

雖然NVLink主要集中在將多個NVIDIA Tesla P100加速器連接在一起,但它也可以用作CPU到GPU的互連。例如,Tesla P100加速器可以通過NVIDIA NVLink技術(shù)連接到IBM的POWER8。POWER8與NVLink?支持四個NVLink。

下圖顯示了一個單GPU連接到啟用NVLink的CPU。在這種情況下,GPU可以以高達160 GB / sec的雙向帶寬訪問系統(tǒng)內(nèi)存,比PCIe提供的帶寬高5倍。

NVLink GPU與CPU互連

下圖顯示了一個系統(tǒng),其中每個GPU與CPU之間有兩個NVLink。每個GPU上剩余的兩個鏈接用于對等方通信

兩個GPU和一個CPU連接,使用80 GB/sec雙向帶寬NVLink接口

3.2. NVLink在Tesla P100中的接口

如Tesla P100設(shè)計部分所述,NVLink互連在P100加速器上。P100包括兩個400針高速連接器。其中一個連接器用于模塊上/下的NVLink信號;另一個用于供電、控制信號和PCIe I/O。

Tesla P100加速器可以安裝到更大的GPU載體或系統(tǒng)板中。GPU載體可以與其他P100加速器或PCIE控制器建立必要的連接。由于與傳統(tǒng)GPU板相比,P100加速器的尺寸更小,因此客戶可以輕松構(gòu)建裝有比以往更多GPU的服務器。通過NVLink提供的額外帶寬,GPU到GPU的通信不會因PCIe帶寬的限制而成為瓶頸,為GPU聚類提供以前不可用的機會。

在GPU架構(gòu)接口層面上,NVLink控制器通過另一個名為High-Speed Hub(HSHUB)的新塊與GPU內(nèi)部通信。HSHUB直接訪問GPU寬交叉開關(guān)和其他系統(tǒng)元素,例如高速復制引擎(HSCE),可用于以最高NVLink速率將數(shù)據(jù)移動進入和移出GPU。下圖展示了NVLink與HSHUB以及GP100 GPU中的一些高級塊之間的關(guān)系。

NVLink與其他主要模塊的關(guān)系
粵公網(wǎng)安備 44030502006483號、 粵ICP備15047669號
  • 捷易科技聯(lián)系人
  • 主站蜘蛛池模板: 测试治具|过炉治具|过锡炉治具|工装夹具|测试夹具|允睿自动化设备 | 隧道烘箱_隧道烘箱生产厂家-上海冠顶专业生产烘道设备 | 美国查特CHART MVE液氮罐_查特杜瓦瓶_制造全球品质液氮罐 | 广州食堂承包_广州团餐配送_广州堂食餐饮服务公司 - 旺记餐饮 | 依维柯自动挡房车,自行式国产改装房车,小型房车价格,中国十大房车品牌_南京拓锐斯特房车 - 南京拓锐斯特房车 | 杭州货架订做_组合货架公司_货位式货架_贯通式_重型仓储_工厂货架_货架销售厂家_杭州永诚货架有限公司 | 派克防爆伺服电机品牌|国产防爆伺服电机|高低温伺服电机|杭州摩森机电科技有限公司 | 制氮设备_PSA制氮机_激光切割制氮机_氮气机生产厂家-苏州西斯气体设备有限公司 | BESWICK球阀,BESWICK接头,BURKERT膜片阀,美国SEL继电器-东莞市广联自动化科技有限公司 | 安徽合肥项目申报咨询公司_安徽合肥高新企业项目申报_安徽省科技项目申报代理 | ERP企业管理系统永久免费版_在线ERP系统_OA办公_云版软件官网 | 棉服定制/厂家/公司_棉袄订做/价格/费用-北京圣达信棉服 | 丝杆升降机-不锈钢丝杆升降机-非标定制丝杆升降机厂家-山东鑫光减速机有限公司 | 道达尔润滑油-食品级润滑油-道达尔导热油-合成导热油,深圳道达尔代理商合-深圳浩方正大官网 | 仓储货架_南京货架_钢制托盘_仓储笼_隔离网_环球零件盒_诺力液压车_货架-南京一品仓储设备制造公司 | 广西正涛环保工程有限公司【官网】| 尾轮组_头轮组_矿用刮板_厢式刮板机_铸石刮板机厂家-双驰机械 | 避光流动池-带盖荧光比色皿-生化流动比色皿-宜兴市晶科光学仪器 东莞爱加真空科技有限公司-进口真空镀膜机|真空镀膜设备|Polycold维修厂家 | 卫生人才网-中国专业的医疗卫生医学人才网招聘网站! | 杭州实验室尾气处理_实验台_实验室家具_杭州秋叶实验设备有限公司 | 粘度计维修,在线粘度计,二手博勒飞粘度计维修|收购-天津市祥睿科技有限公司 | 悬浮拼装地板_篮球场木地板翻新_运动木地板价格-上海越禾运动地板厂家 | 科研ELISA试剂盒,酶联免疫检测试剂盒,昆虫_植物ELISA酶免试剂盒-上海仁捷生物科技有限公司 | GEDORE扭力螺丝刀-GORDON防静电刷-CHEMTRONICS吸锡线-上海卓君电子有限公司 | 立式_复合式_壁挂式智能化电伴热洗眼器-上海达傲洗眼器生产厂家 理化生实验室设备,吊装实验室设备,顶装实验室设备,实验室成套设备厂家,校园功能室设备,智慧书法教室方案 - 东莞市惠森教学设备有限公司 | 祝融环境-地源热泵多恒系统高新技术企业,舒适生活环境缔造者! | 汝成内控-行政事业单位内部控制管理服务商 | 合肥白癜风医院_合肥治疗白癜风医院_合肥看白癜风医院哪家好_合肥华研白癜风医院 | 分类168信息网 - 分类信息网 免费发布与查询 | 蓝米云-专注于高性价比香港/美国VPS云服务器及海外公益型免费虚拟主机 | 机制砂选粉机_砂石选粉机厂家-盐城市助成粉磨科技有限公司 | 金联宇电缆总代理-金联宇集团-广东金联宇电缆实业有限公司 | 没斑啦-专业的祛斑美白嫩肤知识网站-去斑经验分享 | 政府园区专业委托招商平台_助力企业选址项目快速落地_东方龙商务集团 | 匀胶机旋涂仪-声扫显微镜-工业水浸超声-安赛斯(北京)科技有限公司 | 激光内雕_led玻璃_发光玻璃_内雕玻璃_导光玻璃-石家庄明晨三维科技有限公司 激光内雕-内雕玻璃-发光玻璃 | 螺旋丝杆升降机-SWL蜗轮-滚珠丝杆升降机厂家-山东明泰传动机械有限公司 | 阜阳成人高考_阜阳成考报名时间_安徽省成人高考网 | 钢板仓,大型钢板仓,钢板库,大型钢板库,粉煤灰钢板仓,螺旋钢板仓,螺旋卷板仓,骨料钢板仓 | 高速龙门架厂家_监控杆_多功能灯杆_信号灯杆_锂电池太阳能路灯-鑫世源照明 | 黑田精工电磁阀-CAMMOZI气缸-ROSS电磁-上海茂硕机械设备有限公司 |