服务器机柜如何规划?机柜高度、功率密度与布线设计指南

机房里的机柜看似只是个铁架子,但规划得好不好,直接决定了上架顺不顺利、扩容方不方便、散热和供电稳不稳定、以后排障快不快。很多团队上架时是"能塞进去就行",结果没过多久就发现电力不够、温度偏高、线缆一团乱、想加设备没地方。

这篇文章给出一套可操作的机柜规划思路:从机柜高度、功率密度、承重、供电、布线、气流方向,到扩展与冗余预留,最后用一个具体示例把各环节串起来。文中数值是常见经验值,实际以厂商规格、机柜型号和机房条件为准。涉及接电、上架、改线路的操作都有风险,务必断电确认、两人协作并遵守机房规程。

机柜规划要回答的几个问题

好的机柜规划,本质上是回答几个问题:这个机柜要装什么设备、装多少、总高度够不够、总功率有多大、供电线路够不够、承重扛不扛得住、冷风进得来热风出得去、线缆怎么走才不乱、以后加设备还有没有空间。

这几个问题彼此关联。比如设备堆得多、功率密度就高,供电和制冷压力就大;功率密度高,电源线更粗、发热更多,布线空间也更紧张。所以规划不能只看单点,要一起算。

下面按环节拆开讲,每个环节都给出要核对的关键量。

机柜高度与可用 U 数

机柜高度按 U 计算,标准机柜最常见的是 42U。按 1U 约 4.445cm 算,42U 约 186.7cm,加上机柜本身的顶底板和脚轮,整体高度通常在 2 米左右,适配大多数机房的层高和走线桥架。

关键点是:42U 是"标称高度",不是"可用高度"。实际能装设备的空间要扣掉这些:

  • 顶部走线、理线架、光纤配线箱占用的 U 数;
  • 底部理线、PDU 垂直安装、脚轮/支撑占用的空间;
  • 设备之间的散热间隙(虽然不是硬性占 U,但高功率设备之间留空有利于散热);
  • 为未来扩容预留的余量。

经验上,一个 42U 机柜实际可用空间通常在 36U 到 40U 之间。规划时建议按 36U 到 40U 来算,并明确留出至少 2U 到 4U 的扩容余量,别把机柜用到满。

另外要注意机柜深度。常见内深 60cm 到 80cm 以上,深机型和后部走线都需要空间。如果机柜内深不足,会出现关不上门、后部跳线被挤压、电源线弯折半径不够等问题。选购服务器时务必核对机箱深度与机柜内深是否匹配。

功率密度:每柜多少 kW

功率密度指一个机柜内所有设备功耗之和,单位是 kW。它是机柜规划里最容易出事的地方——设备能塞进去,不代表电力供得起。

先算总功率。把每台设备的整机功耗累加,得到机柜总功率。整机功耗最好用带外管理读到的实时值,比标称值更接近真实。经验上,一个普通机柜建议控制在 5kW 到 8kW 以内;高密度 GPU 机柜可能超过 10kW,甚至更高,这就需要专门的配电和液冷等方案支撑。

还要注意峰值和余量。设备启动瞬间、满载运行时功耗会高于常态,PDU 和上游配电的容量建议留 20% 以上余量。同时要算清楚单路 PDU 的额定电流和机柜进线的容量,别让总功率超了线缆和断路器的承载。

# 读取服务器整机功率(需带外管理支持)
sudo dnf install -y ipmitool   # RHEL/CentOS/Rocky
sudo apt install -y ipmitool   # Debian/Ubuntu
sudo ipmitool dcmi power reading

# 查看电源模块输入功率传感器(部分机型支持)
sudo ipmitool sdr type 'Power Supply'

机柜级功率最好由带计量的 PDU 读取,比逐台累加更准,也能发现实际负载与规划值的偏差。

承重

机柜承重常被忽略。静态承重能力常见在 500kg 到 1000kg 区间,具体看机柜型号,选购时看清楚规格。

设备重量差异很大:1U 服务器连包装外一般十几公斤,2U 存储机加满硬盘可能三十公斤以上,4U 高配 GPU 机型可能超过五十公斤。把计划上架设备的重量累加,确认不超过机柜静载承重,并给未来加设备留余量。

还有两个细节:一是重量集中问题,重设备尽量装在机柜下部,降低重心、方便搬运,也减少机柜倾倒风险;二是机房地板承重,高密度机柜集中摆放时,要考虑楼板单位面积承重是否够,必要时分散布置或做加固。

供电:双路 PDU 与 A/B 路

供电规划的目标是让每台服务器都有两路独立供电,任一路故障时业务不中断。

标准做法是机柜内装两路 PDU,分别接机房 A 路和 B 路电源(这两路来自不同的上游配电或 UPS,真正独立)。服务器配双电源时,一个电源接 A 路 PDU,另一个接 B 路 PDU。这样即使 A 路整体故障,B 路仍能承载全部负载。

几个要点:A、B 两路 PDU 的容量要各自能独立承载机柜满载功率,而不是平均分摊后才够——因为故障时单路要顶全部负载。PDU 的插座数量要够,并考虑不同设备的插头类型(服务器常用 C13/C19)。PDU 建议用带计量和远程管理的型号,便于监控各路电流和功率,及早发现负载不均衡或过载。

还需要规划好上游:机柜进线的容量、对应断路器的额定值、UPS 的容量和冗余等级。任何一个上游环节容量不足,都会成为瓶颈。

布线设计:走线、标签、跳线管理

布线做得好,排障效率会有质的变化。核心原则是分区、分离、可追溯。

分区,指电力线和数据线分开走。强电线(电源线)和数据线(网线、光纤)走不同的路径,避免电磁干扰,也便于分别维护。通常电力线走机柜侧边的 PDU 沿线,数据线走机柜顶部或侧边的理线通道。

分离,指不同用途、不同方向的线缆分开捆扎,不要混在一起。

可追溯,指每根线都有清晰标签。标签要标清楚两端设备、端口和用途,比如"SW01-Gi1/0/5 → SRV03-eth0"。标签是布线的灵魂,没有标签的线缆等于没有布线——排障时只能一根根拔,风险极大。

跳线管理方面,用足够长度的跳线并留出余量,避免拉得过紧;用理线架、魔术贴或理线环固定,别用扎带捆死(后期想拆会很麻烦);同方向线缆统一走线,保持整齐;预留一定冗余长度方便调整。

# 记录网卡与端口信息,便于做布线文档
ip -br link show
ip -br addr show

# 查看网卡速率与链路状态
ethtool eth0 | grep -Ei 'speed|duplex|link'

# 服务器侧可导出网卡与固件信息归档
sudo lshw -class network -short

建议维护一份机柜/端口对应表,把每台设备的 U 位、名称、管理 IP、上联端口、电源接线都记录下来。这份文档在排障和交接时价值极高。

散热气流方向

散热方面,服务器普遍是前进后出,所以机柜内气流方向必须一致,所有设备正面朝冷通道、背面朝热通道。

具体要注意:不要在机柜前面堆杂物或挡住进风;空余 U 位装盲板,防止热风回流到冷通道;机柜前后门用网孔门或不影响进出风的设计;高功率设备尽量分散布置,避免相邻设备互相加热形成局部热点;按冷热通道规划机柜朝向,让冷通道对着设备进风口。

这些做法成本低、收益大,是机柜规划里性价比最高的部分。

扩展与冗余预留

规划时最忌讳"刚好装满"。建议在以下方面留余量:

U 位留 2U 到 4U;电力留 20% 以上余量;PDU 插座留几个空闲;网络端口在交换机侧留出余量;布线通道预留空间容纳未来新增线缆;机柜承重留余量。

冗余方面,除了双路供电,还要考虑交换机、上联线路的冗余。如果机柜内所有服务器都上联到同一台交换机、同一路上联,那交换机就是单点。重要的机柜应做到双交换机、双上联,服务器双网卡分别上联不同交换机,对应电源与网络的 A/B 路保持一致。

一个规划示例

假设要规划一个机柜,计划部署 8 台双路 2U 服务器,每台整机功耗经验值约 450W;2 台 1U 网络交换机,每台功耗约 150W。

高度核算:8 台 × 2U = 16U,2 台 × 1U = 2U,合计 18U,加上理线架和顶部空间约 4U,共约 22U,在 42U 机柜内可用高度约 36U 的前提下,留出约 14U 余量,空间充足。

功率核算:服务器 8 × 450W = 3600W,交换机 2 × 150W = 300W,合计约 3900W,即约 3.9kW。留 20% 余量约 4.7kW。选配单路 PDU 容量能独立承载约 5kW 以上,两路 PDU 分别接 A、B 路电源。

供电接线:每台服务器双电源,一个接 A 路 PDU,一个接 B 路 PDU。交换机如果支持双电源同样分接两路;不支持则上联做好冗余。

布线:电源线走机柜侧边 PDU,网线走顶部理线架;每根跳线两端贴标签;维护机柜文档记录每台的 U 位和端口。

散热:设备正面朝冷通道,空余 U 位装盲板,后门留足回风空间。

承重:8 台 2U 服务器加 2 台交换机,按每台 25kg 左右估算约 250kg,机柜静载承重若为 500kg 以上,余量充足。

按这个规划,空间、电力、承重、散热、布线、冗余都有明确依据,后续扩容也有余量,是一个可落地的方案。

常见问题

Q:42U 机柜能装 21 台 2U 服务器吗?
数字上可以,但扣掉理线和散热间隙后实际装不了这么多,而且 21 台的总功率很可能超过机柜供电和制冷能力。要先算功率密度再定数量。

Q:A、B 两路 PDU 各承担一半负载,是不是等于每路只要一半容量?
不是。故障时单路要顶全部负载,所以每路都应能独立承载机柜满载功率。

Q:先上设备,以后再整理布线行不行?
不建议。布线混乱会严重影响排障和扩容效率,后期整理成本更高。上架时就按规范走线贴标签,事半功倍。

Q:盲板有必要装吗?
有必要。它防止热风回流到冷通道,改善气流组织,成本极低。

Q:重设备装上面还是下面?
尽量装下面,降低重心、便于搬运,也更安全。

总结

  • 机柜规划要同时回答空间、功率、承重、供电、布线、散热、冗余七件事,不能只看高度。
  • 42U 是标称高度,实际可用约 36U 到 40U,务必留 2U 到 4U 扩容余量,并核对机柜内深与设备深度。
  • 功率密度建议普通机柜控制在 5kW 到 8kW 以内,电力留 20% 以上余量,A、B 两路 PDU 各自都要能独立承载满载。
  • 布线坚持分区、分离、可追溯,电源线与数据线分开走,每根线贴标签,并维护机柜端口文档。
  • 散热靠统一气流方向和盲板,冗余要覆盖供电和网络两路;上架、接电、改线都有风险,操作前务必断电确认并遵守机房规程。