搜索
当前所在位置: 首页>技术支持

GPU服务器前端网络组网概述

发布时间:2026-06-17 09:13:39 作者:超级管理员 点击:50 【 字体:

根据H100-GPU服务器确认各网络平面

针对H100-GPU服务器的配置清单,可进行网络平面划分:
single-400GE 8x (支持IB NDR/Ethernet OSFP),用于后端网络GPU分布式集群梯度同步
single-200GE 1x  (支持IB HDR/Ethernet QSFP56),用于对接存储网络
dual-25GE 1x(SFP+),用于对接前端网络

图片

注:single指Single Port (单口网卡),该板卡仅有一个接口(如一个 RJ45 电口或一个 SFP+/QSFP+ 光口);dual指Dual Port (双口网卡),即板卡拥有两个独立的接口。

Frontend Fabric(前端网络)概述

前端网络作用:一般用于接收推理请求,例如用户向大模型(豆包/GPT)问问题,这些推理请求流量会从前端网络接收发送给后端网络进行推理(南北向流量)。

如果要规划前端网络,则需要对流量模型进行拆分,用户位置可能位于互联网,也可能位于数据中心BorderLeaf专线互联的其他网络

1、如果用户位于专线互联的其他网络:
用户 -> 用户侧接入交换机 -> 用户侧汇聚交换机 -> 用户侧核心交换机 -> 数据中心BorderLeaf -> 数据中心Spine -> 数据中心 ServiceLeaf -> 数据中心VAS -> 数据中心ServerLeaf -> H100前端网络端口

image.png

2、如果用户位于互联网
用户 -> 互联网 -> 数据中心PE -> 数据中心出口防火墙 -> 数据中心BorderLeaf -> 数据中心Spine -> 数据中心 ServiceLeaf -> 数据中心VAS -> 数据中心ServerLeaf -> H100前端网络端口

image.png

Frontend Fabric(前端网络)规划概述

所以,距离H100前端网络接口最近的TOR交换机ServerLeaf就是前端网络交换机。再根据前端网络接口的带宽速率,选择对应带宽速率的数据中心交换机(25GE)。
注:TOR=Top Of Rack,一个42U机柜中,与服务器同柜的交换机一般部署在机柜最顶部,当然也可以部署在机柜中间MOR或者机柜底部BOR

对于收敛比,在前端网络规划中其实并不需要极致的1:1收敛比,但在推理场景中,为了保证极致的响应速度,也可以讲将前端网络的收敛比控制在 1:1 或 1.5:1 以内。
例如一台48口的25GE交换机(元创云端数据中心交换机),其上行接口8个100GE。若48个下行口全部接满,则收敛比为 48x25 : 100x8 = 1.5:1 ,满足业务需求。

图片

对于交换机功能特性,由于数据中心大部分为SDN/云化架构,所以需要考虑交换机支持:
可靠性:M-lag,支持数据中心分布式网关场景,提供网关双活和故障秒级切换,控制面独立,故障域隔离。
路由协议:BGP,控制策略丰富(优于OSPF/IS-IS/Static),支持属性扩展(MP-BGP)
虚拟化特性:VRF / VxLAN ,目前数据中心都为SDN架构的租户网络,通过VRF将数据中心隔离为多个租户网络,租户之间默认隔离。租户之间业务可通过VxLAN隧道进行通信/迁移。


阅读全文
相关推荐

5月智算动态:信创GPU目录发布/tokens中转站被罚/B300回落/H2oo靴子落地/HBM3e需求爆发

5月智算动态:信创GPU目录发布/tokens中转站被罚/B300回落/H2oo靴子落地/HBM3e需求爆发
国产算力1.信创目录发布:第一批9颗信创算力芯片基于国产工艺(含封装),目录发布对各地方项目影响巨大地方态度:各地方政企“吹风”优先支持本地进目录的产品运营商态度:运营商自采项目“吹风”只能采购目录产品测试条件:前提条件,国产工艺(含代工),很多产品都送测了,第一批没进入,关键是代工(含封装)低点的问题...

国内GPU卡全线飙涨原因分析

国内GPU卡全线飙涨原因分析
紧张升级5 月份,非常非常多的人寄希望于两个大佬谈判之后的的 GPU管制放松,特别是上一代 hopper架构的顶配算力卡松绑,弥补内部的算力不足,但是结果事与愿违,双方在 GPU 算力领域抓紧了卡脖子竞赛,彼此相互掐。(不要抱幻想了,干就完了)咱发布“韬定律”,引领未来半导体产业自主可控发展;对面发布史上最严 BIS 禁令...

万亿空间!NVIDIA 2027财年第一季度财务报告深度解读!

万亿空间!NVIDIA 2027财年第一季度财务报告深度解读!
AI基础设施的投资浪潮,早已跨过概念炒作阶段,进入实打实的业绩兑现周期。美东时间5月20日,英伟达发布2027财年第一季度重磅财报,交出了一份颠覆行业预期的成绩单。即便彻底失去中国主流AI芯片市场,英伟达依旧创下单季营收、净利润双历史新高,用硬核数据印证了自身在全球AI产业链的绝对统治力。更值得关注的是,这份财报...

全球竞争格局下的中国AI模型:激流勇进,但信任尚待跨越

全球竞争格局下的中国AI模型:激流勇进,但信任尚待跨越
在全球AI竞争格局中,中国AI模型在技术能力上已与北美差距缩小,但在海外市场渗透与用户信任方面仍面临显著挑战。当前,AI模型正从“工具”演进为“基础设施”,其能力已成为衡量企业技术竞争力与未来增长空间的核心指标。与此同时,Agent的繁荣并未削弱模型的重要性,反而放大了模型能力的差距。未来,谁掌握更强的模型、数...

北京 A100-40G 现货出租

北京 A100-40G 现货出租
GPU裸金属服务器-A100*8CPU: 2*Intel Xeon Gold 6248R(24Core,3.0GHz)内存:24*32GB系统盘:2*480GBSATA SSD数据盘:4*1.92TB NVMe SSD显卡:Nvidia A100 PCIE 40G *8网卡:1 x2*25GE价格:85000/月有效期:7天 压一付一 年闭口...

西柚云超算与云南联通正式达成战略合作,将共建云南科研超算中心节点

西柚云超算与云南联通正式达成战略合作,将共建云南科研超算中心节点
2026年5月25日消息,西柚云超算与中国联通云南昆明分公司在昆明正式签署战略合作协议,标志着双方将携手共建云南科研超算中心节点,共同推动云南省算力基础设施建设与数字经济发展。根据战略合作协议,双方将围绕联通环湖东湖机房开展深度合作,依托该机房优质的网络资源和电力保障条件,共同建设集高性能计算、大规模存储互...

上新!移动模型服务平台MoMA上架多款千问旗舰模型

上新!移动模型服务平台MoMA上架多款千问旗舰模型
AI“超级入口”再迎重磅升级!移动模型服务平台MoMA集中上架三大品类、多款千问优质旗舰模型,进一步扩充模型储备、拓宽应用场景,让用户便捷对接顶尖AI算力与模型资源,精准匹配各类AI使用需求。丰富模型矩阵,适配多元使用场景本次上新打破单一模型类型局限,以“汇聚更多模型能力”为核心,精准覆盖旗舰模型的高效适配与...

北京超智算人工智能创新示范园项目主体结构封顶

北京超智算人工智能创新示范园项目主体结构封顶
2026年6月3日,北京超智算人工智能创新示范园项目举行封顶仪式。项目于5月26日圆满完成主体结构封顶施工,顺利达成阶段性建设目标,为后续室内装修、专项验收、正式投产等工作有序推进夯实了坚实基础。作为北京市2025、2026年“3个100”重点工程,该项目位于中关村科技园区石景山园北II区创业创新园1606-634-2地块,规划用地...

GPU显卡驱动如何安装?

GPU显卡驱动如何安装?
注:GPU服务器建议不要升级内核版本,一旦升级内核后需要重新安装GPU驱动安装GPU驱动$apt-getinstallgccmake$apt-getupdate$wgethttp://cn.download.nvidia.com/XFree86/Linux-x86_64/440.44/NVIDIA-Linux-x86_64-440.44.run$sudochmod+xNVIDIA-Linux-x86_64-440.44.run$s...

2026 大模型 GPU 选型全指南|从消费游戏卡到超算卡,适配全系列 DeepSeek 模型部署

2026 大模型 GPU 选型全指南|从消费游戏卡到超算卡,适配全系列 DeepSeek 模型部署
随着 DeepSeek 全系列开源模型(1.5B/7B/13B/32B/67B/671B 稠密大模型)大范围落地私有化部署,显卡显存容量、单 / 双精度算力、显存带宽、多卡互联能力成为选型核心。市面上显卡分为:消费游戏卡(RTX3090/4090/5090)、专业可视化推理卡(A6000/L40/L40S/A10)、超算训练卡(A100/A800/H100/H800/H200) 三类,从硬件参数...
返回顶部