数据中心背后的“血管”：聊聊服务器那些形形色色的连接线
前几天有个刚入行的朋友问我：“嘿，我看机房里的服务器后面，密密麻麻全是线，乱七八糟的，都叫啥名儿啊？到底有什么用？” 这个问题问得挺实在的，很多人一开始接触服务器，看着那些花花绿绿、粗细不一的线缆，确实会有点懵，今天咱们就来掰扯掰扯，服务器屁股后面那些线，到底都是干什么的。
1. 根红苗正的基本款：电源线和网线
这俩是“活命”和“交流”的基础，必须得先说。
电源线，这个不用多解释，就像你家电视、冰箱一样，没电什么都白搭，但服务器的电源线和普通电脑的有点区别，服务器电源通常支持冗余供电，就是一台机器给你塞两个甚至四个电源模块，每个模块都连着一根电源线，接到不同的电源插座或者机柜的PDU（Power Distribution Unit，电源分配单元）上，这样做的好处是，万一有一路电或者一个电源模块挂了，另一个能立刻无缝顶上，服务器不会因为断电而宕机，所以你在机房看到一台服务器插着两根甚至四根电源线，别奇怪，这是“双保险”，甚至“四保险”。
网线，这是服务器和外界通信的生命线，现在最常见的是超五类和六类网线，接头是RJ45，水晶头样子，它们的区别在于传输速率和抗干扰能力，超五类一般支持到千兆（1Gbps），六类可以稳稳地跑千兆，还能支持短距离的万兆（10Gbps），现在机房为了追求更高带宽，开始普及超六类甚至七类、八类网线，这些线更粗，屏蔽性能更好，就为了支撑那恐怖的25G、40G甚至100G的网络连接。
但网线有个“原罪”：传输距离有限，一般超过100米信号就会衰减得厉害，物理线缆有重量，一个机柜堆满网线，几十上百根，那重量和通风压力都很大。
2. 追求极致速度的光纤线
当服务器的“胃口”越来越大，网线就开始力不从心了，这时候，光纤（光缆）就闪亮登场了。
你看到的那种细细的、透明的、接头是亮晶晶的方形或圆形小插头的，就是光纤，光纤不是传输电信号，而是传输光信号，优势太明显了：
速度极快：轻松支持10Gbps、25Gbps、100Gbps甚至400Gbps。
距离超远：单模光纤（接头通常是黄色的）传个几十公里没问题，多模光纤（接头通常是橘色或水蓝色）也能在数百米内稳定传输。
抗干扰强：不产生电磁辐射，也不受电磁干扰，在强电磁环境下稳如泰山。
核心交换机到服务器的接入，服务器到存储设备的连接，这些动辄几百G带宽的关键路径，基本都是光纤的天下，不过光纤也有个小烦恼：太娇贵了，接头不能脏，不能弯折超过半径，安装需要专业工具和培训，稍微有点瑕疵，光功率下降，网络就丢包了。
3. 内部“高速公路”的延伸：SAS线与SATA线
说完对外通信，聊聊服务器内部那些硬盘，服务器需要存储海量数据，硬盘怎么连上主板的？
以前的老机器，或者现在的一些低端入门级服务器，硬盘接口还是SATA（Serial ATA），和家用电脑一样，SATA线很细，扁扁的，主要用于连接机械硬盘或固态硬盘（SATA SSD），但SATA有个致命缺点：一个接口只能连一块硬盘。
服务器为了追求更高的性能和可靠性，普遍采用SAS（Serial Attached SCSI） 接口，SAS线看起来和SATA线有点像，但更粗、接口更紧密，它最大的优势是可以“一拖多”：一个SAS接口可以连接很多块硬盘（通过扩展器），也就是所谓的SAS域，而且SAS的传输速率比SATA高很多（SATA 6Gb/s，SAS 12Gb/s，现在已经是24Gb/s），还支持全双工（可以同时收发数据），当你在服务器背板上看到一堆粗壮的线缆连接到硬盘背板，那多半就是SAS线。
4. 迅速崛起的“新贵”：DAC高速铜缆
最近几年，有一种线缆越来越流行，尤其是在AI服务器集群里，它就是DAC（Direct Attach Copper Cable，直连铜缆）。
DAC长得就像一根粗的电缆，两头是SFP+、QSFP+或者QSFP28这种高速连接器，它本质上就是一根“缩短并固化”了的光纤模块和线缆，它的好处是：
成本低：比光模块加光纤便宜很多。
功耗低：不需要光电转换芯片，插上去就用，发热量极小。
性能好：在短距离（比如机柜内，几米距离）内，传输速率可以达到25G、100G甚至400G。
坏处也很明显：死重且不灵活，一根几米的DAC线缆，硬得像根钢管，在狭小的机柜后面很难弯曲走线，而且距离长了信号就完蛋，所以DAC主要用在机柜内相邻交换机和服务器的连接，或者是服务器到存储设备之间的短距离高速互联。
5. 不得不提的特殊角色：M.2与PCIe线
现在越来越多的服务器用上了M.2接口的NVMe SSD（固态硬盘），M.2接口特别小，直接插在主板上，但它走的通常是PCIe通道，速度极快（PCIe 3.0、4.0、5.0都有）。
还有一种是PCIe线，通过转接卡，你可以把显卡、NVMe硬盘或者专业的计算卡（比如GPU加速卡、FPGA卡）用特殊的PCIe线缆延长出来，这种线缆很粗，内部是很多根独立的PCIe通道，可以让你在机箱里实现灵活的硬件布局。
服务器还有专门的管理线，比如IPMI（智能平台管理接口）专用网口，插上就能远程开关机、看屏幕、装系统，完全独立于主业务网络，还有串口线（DB9接口），现在用得少了，但一些老设备或者调试场景还得靠它。
到底怎么选？
看完这些，你可能会问：“那我的服务器到底该用什么线？”
其实答案很简单：看需求，看距离，看预算。
距离短（机柜内），带宽要求不高（千兆/万兆） →六类网线，便宜、好换、兼容性好。
距离短，带宽要求极高（25G/100G+） →DAC高速铜缆，成本低、功耗低、性能强劲。
距离远（跨机柜、跨楼层、跨数据中心） →单模光纤，唯我独尊。
高性能存储连接（内部磁盘阵列） →SAS线，稳定、可靠、支持多盘。
极致性能（NVMe SSD、GPU） →PCIe线/M.2接口，极致速度。
再给你一句掏心窝子的话：布线是门艺术，更是门科学。 一个好的数据中心，线缆一定是走线整洁、标签清晰、绑扎得当的，一根乱糟糟的线，不仅影响散热，最难的是，你在几百上千根线里找一根出问题的线时，那感觉，堪比大海捞针。
别小看这些藏在机架后面、默默无闻的“血管”，它们决定了你服务器的生死速度，也见证了一个运维工程师的头秃历程，了解它们，尊重它们，你才能在数据中心里游刃有余。
文章摘自：https://idc.huochengrm.cn/js/26914.html
评论