服务器机房是什么样的

结论: 服务器机房(IDC 机房)是按 GB 50174 或 Uptime Tier 标准建设的专用场地,核心特征是双路市电 + UPS + 柴油发电机的不间断供电、22±2℃ / 湿度 40%~60% 的精密空调恒温恒湿、42U 标准机柜按冷热通道布置,以及门禁、监控、气体消防构成的安防体系。

第一次进 IDC 机房的人,通常会对三件事印象深刻:冷(哪怕外面三十几度,机房里要穿外套)、吵(几千台服务器风扇的轰鸣,通常在 70~85 dB)、以及密(一排排机柜望不到头,地面是架空的防静电地板,头顶是密密麻麻的桥架线缆)。

但这些表象背后是一套非常严谨的工程体系:每一个机柜能放多少机器、每一度电从哪来、每一份热量怎么带走、火灾时用什么灭火,都有明确的标准和冗余设计。本文就按"场地 → 机柜 → 供电 → 制冷 → 网络 → 安防 → 运维制度"的顺序,把机房真实是什么样讲清楚。

机房的等级是怎么划分的?

国内主要依据国家标准《GB 50174 数据中心设计规范》分为 A、B、C 三级(A 级最高);国际上普遍引用 Uptime Institute 的 Tier I~IV 分级(Tier IV 最高)。 等级决定的是"允许中断多久"和"容错能力"。

等级Uptime Tier 定义年允许中断时间冗余特征适用场景
C 级 / Tier I基本型约 28.8 小时单路供电单路制冷,无冗余小型企业自用机房、非关键业务
B 级 / Tier II冗余部件型约 22 小时关键设备冗余(N+1),但单路径中小企业托管、一般业务
A 级 / Tier III可在线维护型约 1.6 小时双路径供电与制冷,可在线维护不停机主流商业 IDC、金融一般业务
A 级 / Tier IV容错型约 0.4 小时(26 分钟)双路径 + 全容错(2N),单点故障不影响业务金融核心、大型云厂商核心节点

选择机房时的经验判断:

  • 普通网站、测试环境:B 级 / Tier II 足够,价格低。
  • 生产业务、电商、SaaS:至少 A 级 / Tier III+,要求双路供电与可在线维护。
  • 金融、政务、核心数据库:A 级 / Tier IV 或 Tier III 双活架构,并要求出具等级认证文件。

要注意一个营销话术:很多机房自称"T3+"或"T3 级标准建设"。"按 T3 标准建设"不等于通过了 Uptime 的 T3 认证,认证需要 Uptime Institute 官方出具设计(TCDD)、建造(TCCF)与运营(TCOS)三类证书。签约前可要求查看证书原件。

机房的场地与机柜是什么样的?

机房的核心空间单元是机柜:标准机柜宽 600 mm 或 800 mm、深 1000~1200 mm、高 42U(约 2 米)。 服务器的高度单位是 U,1U = 4.445 cm(1.75 英寸),这是所有机架设备通用的尺寸基准。

机柜与空间的关键数字

项目标准值说明
1U 高度4.445 cm(44.45 mm)EIA-310 标准
标准机柜高度42U,约 186.7 cm实际可用 36~40U
机柜宽度600 mm / 800 mm800 mm 便于侧面走线与散热
机柜深度1000 / 1100 / 1200 mm需容纳服务器机身 + 后部走线
单柜承重800~1500 kg需核对楼板承重
单柜供电常见 10A/220V(2.2 kW)、16A/220V(3.5 kW)高密度柜可达 6~10 kW
通道宽度冷通道 ≥ 1.2 m,热通道 ≥ 0.9 m便于设备搬运与维护

冷热通道布局

现代机房普遍采用冷热通道隔离(Hot/Cold Aisle Containment):

  • 机柜"面对面"排列形成冷通道,精密空调把冷空气(送风温度通常 18~24℃)从架空地板下方的静压箱送出,经地板开孔板进入冷通道。
  • 服务器从前面板吸入冷风,从后面板排出热风,热风进入机柜"背靠背"形成的热通道,被空调回风带走。
  • 冷通道通常加装封闭顶棚与端门,防止冷热气流混合。这一项改造能显著改善散热效率。

三个容易被忽视但影响很大的细节:

  1. 盲板(Blank Panel):空 U 位必须装挡板,否则冷风从空隙短路进热通道,热风回流导致上层设备温度上升 5~10℃。
  2. 静电地板:高架防静电地板高度通常 300~600 mm,既是送风静压箱也是线缆通道。
  3. 线缆分层:强电走地板下或上走线架的底层,弱电(网线、光纤)走上层桥架,两者必须分开,避免干扰。

机房的供电系统是怎么保证不断的?

典型 A 级机房的供电链路是:两路独立市电 → 高压/低压切换柜 → UPS(不间断电源)→ 列头柜 → 机柜 PDU → 服务器电源。柴油发电机作为市电全断时的后备。

环节设备作用典型配置
市电引入双路 10 kV 市电来自不同变电站的两路独立电源2N,互为备用
变压器与低压柜干式变压器10 kV 降为 380 V/220 V2N 或 N+1
UPS在线式 UPS市电中断时无缝切换,并稳压滤波2N 或 N+1,后备电池 15~30 分钟
柴油发电机柴油发电机组市电长时间中断时供电N+1,储油满足 8~12 小时
列头柜配电列柜每列机柜的电力分配与计量双路输入,带分路计量
机柜 PDU电源分配单元机柜内给每台设备供电A/B 两路,带电流显示与告警
服务器电源冗余电源模块设备级冗余1+1 或 2+2

客户能看到的那部分

作为托管客户,你直接接触的是机柜里那两条 PDU(通常竖装在机柜后部两侧,标为 A 路和 B 路)。正确的接法是:服务器的两个电源模块分别接 A 路和 B 路。 这样任何一路 PDU 失电,服务器都不掉电。

验收时可以要求机房配合做"断电演练":拔掉 A 路,确认服务器无感知,再用 ipmitool 确认两个电源模块的状态变化。

bash
# 查看服务器电源模块状态(应在拔掉一路后看到一个 PSU 变为 Off/Absent)
sudo ipmitool sensor list | grep -iE "psu|power supply|pwr"
sudo ipmitool chassis status | grep -i "Power"

# 查看系统是否因为掉电触发过非正常关机
last -x | grep -E "shutdown|reboot|crash" | head -n 20
journalctl --list-boots | tail -n 10

机房的制冷与温湿度标准是什么?

机房采用精密空调(也称恒温恒湿空调)而非普通家用空调,标准是送风或回风温度维持在 22±2℃、相对湿度 40%~60%。 GB 50174 对 A 级机房的推荐值是冷通道或机柜进风区温度 18~27℃、相对湿度 40%~60%、露点温度 5.5~15℃。

为什么是 22℃ 和 40%~60%

  • 温度:低于 18℃ 会浪费大量制冷能耗;高于 27℃ 时,服务器 CPU 的结温余量下降,容易触发降频甚至保护性关机。硬盘的可靠性对温度尤其敏感,长期高于 40℃ 会显著缩短寿命。
  • 湿度:低于 40% 容易产生静电放电(ESD),损坏电子元件;高于 60% 会在冷表面结露,导致短路。

常见制冷架构

架构原理适用密度特点
房间级精密空调 + 地板下送风空调机组在机房两侧,冷风送进地板下静压箱单柜 2~5 kW最常见,改造成本低
列间空调(In-Row)空调插在机柜列中,就近制冷单柜 5~15 kW送风距离短,效率高
背板空调(Rear Door HX)机柜后门做成热交换器单柜 10~30 kW高密度,改造需换柜门
液冷(冷板 / 浸没)冷却液直接或间接带走热量单柜 30 kW 以上AI 训练集群的主流方向

衡量机房能效的核心指标是 PUE(Power Usage Effectiveness,电能使用效率)= 机房总耗电 ÷ IT 设备耗电。理想值是 1.0,国内传统机房在 1.5~2.0,新建大型数据中心可做到 1.2~1.3,采用液冷与_free cooling_(自然冷源)的先进数据中心可低于 1.15。

客户视角:怎么验证机房温湿度是否达标

bash
# 读取服务器自身的进风温度(多数 BMC 提供进风口传感器)
sudo ipmitool sensor list | grep -iE "inlet|ambient|temp"

# 读取硬盘温度(超过 45℃ 需要警惕)
for d in /dev/sd[a-z]; do
  sudo smartctl -A "$d" 2>/dev/null | grep -E "Temperature_Celsius|194" && echo "  ^ $d"
done
sudo nvme smart-log /dev/nvme0 | grep -i temperature

# 读取 CPU 温度(需加载对应内核模块)
sudo apt-get install -y lm-sensors
sudo sensors-detect --auto
sensors

进风温度若长期高于 27℃,或硬盘温度长期高于 45℃,应向机房提出整改——这既是设备寿命问题,也是机房是否履行环境承诺的判据。

机房的网络与安防是什么样的?

网络方面,商业 IDC 通常接入多家运营商并通过 BGP 广播,核心交换机与汇聚交换机构成双上行冗余;安防方面,采用"门禁 + 视频监控 + 气体消防 + 7×24 值守"的四重体系。

网络架构要点

  • 出口带宽:机房从电信、联通、移动、教育网等多家运营商分别接入,总出口从几十 Gbps 到数 Tbps 不等。
  • BGP 自治域:机房拥有自己的 AS 号与 IP 段,通过 BGP 向各运营商广播,实现单 IP 多线最优访问。
  • 内部层级:核心层(核心交换机)→ 汇聚层 → 接入层(机柜顶部交换机,即 ToR,Top of Rack)。
  • 冗余:核心与汇聚设备双机、链路聚合(LACP)、双上行,避免单点故障。

安防体系

系统具体措施
门禁刷卡 + 生物识别(指纹/人脸),双人双锁,进出记录留存
视频监控全覆盖无死角,录像保存 30~90 天
消防早期烟雾探测(VESDA)+ 气体灭火(七氟丙烷/IG541),严禁用水喷淋
防盗与防破坏机柜独立门锁,托管客户可自购柜锁
环境监控温湿度、漏水、UPS、发电机状态实时告警
值守7×24 小时运维值班,巡检记录留档

气体灭火是关键:机房带电设备不能用水,七氟丙烷(HFC-227ea)或 IG541(惰性气体混合)在数十秒内释放,通过窒息或化学抑制方式灭火,且对设备无残留损害。进入气体灭火保护区前必须确认已切换到手动状态,否则误喷会危及人员。

客户进机房要做什么?实操流程

标准流程是:提前提交工单 → 到达前台实名登记 → 领取临时门禁卡/访客证 → 寄存电子设备与包 → 由机房工程师陪同进入 → 在指定机柜作业 → 完成后登记离场。 全程通常不允许拍照。

上架与巡检的必备清单

  1. 身份与手续:身份证、工单号,部分机房要求公司介绍信。
  2. 工具:螺丝刀、标签纸、扎带、网线钳、测线仪、便携显示器(部分机房提供 KVM 车)。
  3. 防静电:佩戴防静电手环,接触设备前先触摸机柜金属部分放电。
  4. 作业记录:变更前后拍照(若允许)、记录机柜号与 U 位、更新 CMDB。
  5. 离场确认:确认机柜门关闭、盲板装回、工具清点、无遗留物。

远程替代方案:优先用带外管理

大多数"必须去机房"的场景其实可以用 IPMI 解决。上架后配好 BMC,之后重装系统、强制重启、看串口日志都不用跑机房:

bash
# 远程挂载 ISO 重装系统(需要 BMC 支持虚拟介质)
ipmitool -I lanplus -H  -U <用户> -P '<密码>' chassis bootdev pxe options=persistent
ipmitool -I lanplus -H  -U <用户> -P '<密码>' chassis power cycle

# 打开串口重定向,看到 BIOS 与内核输出(诊断启动失败的神器)
ipmitool -I lanplus -H  -U <用户> -P '<密码>' sol activate
# 退出用 ~. (先按回车再输入波浪号加点)

# 查看系统事件日志(SEL),定位硬件历史事件
ipmitool -I lanplus -H  -U <用户> -P '<密码>' sel list
ipmitool -I lanplus -H  -U <用户> -P '<密码>' sel elist | tail -n 30

sol activate(SOL,Serial Over LAN)是托管场景最有价值的功能:系统起不来、网络不通时,它能让你像坐在显示器前一样看到全部启动输出。

常见误区 / 排错提示

  1. 只看等级宣传,不看认证与实际冗余。 "按 T3 标准建设"和"通过 T3 认证"是两回事。签约前应索要认证证书、查看 UPS 与发电机的实际配置,并在合同里写清可用性 SLA 与赔付条款。
  2. 两个电源插在同一条 PDU 上。 这样冗余完全失效。上架后必须用"拔一路"的方式实测,并在 PDU 上做好 A/B 标识。
  3. 忽略温湿度的长期监测。 一次巡检正常不代表全年达标。应在服务器上持续采集进风温度与硬盘温度,长期高于 27℃/45℃ 要正式书面交涉。
  4. 以为进了机房就能随意操作。 机房内所有操作都要有工单依据,擅自拔插其他机柜的线缆可能引发严重事故,也可能被机房追责。任何变更先提工单。
  5. 不做进出与变更记录。 机房进出记录、变更记录是故障复盘和合同争议时的唯一证据。养成"每次进场必更新 CMDB、必留书面记录"的习惯。