运维在数据中心建设中的重要性

运维在数据中心建设中的重要性

——某数据中心建设中运维思维运用实例

一、项目介绍：

本项目是一个扩容项目，项目地点是在写字楼内，由于历史原因，项目自身条件属于先天不足类型，所以在后期设计及建造上存在一定的困难。

本人从事IDC工作有8年时间，在做运维工作的时候，经常会遇到一些机房设计上不利于运维的情况，在做本项目时，经常以运维的思维来考量机房的设计是否合理。本文就讨论一下从运维的角度来设计与建造机房，从日常运维层面，定制机房，解决机房建设中可能会带来的不便捷。

二、平面布局

本项目IDC机房区域尺寸为：41m×8.4m 东西向的狭长区域，在做机房平面布局的时候，无外乎是两种方向：1）东西向，形成一个狭长通道，2）南北向，短而多的冷池数量。

对于这两个设计方案，各有优劣，但最终依然是运维需求起了关键的决定性作用。根据本身业务需求，投产后，每机柜会放置12台2U 服务器，每三个机柜为一个网络接入单元，根据这样的使用需求，最终设计布局采取南北向排列机柜，如此形成一个个冷池单元。每列9个机柜，如此刚好又形成3个网络接入单元，每个冷池9个网络接入单元。采用这样的布局模式，可以有效的按照业务情况做分区域部署设备，方便管理与维护。而且还可以根据业务重要等级情况，设置冷池独立门禁系统，相比东西向狭长的布局方式，这样的布局更合理，套用当前流行术语——微模块。

三、机柜配置

说到机柜配置，看似没什么好聊的，选定一下高度及深度基本上就不在考虑其他因素了。但实际上还是有很多值得推敲的地方。

这里我只阐述功能使用上的配置相关，材料质量不是本文讨论的重点。首先，是否需要安装设备托盘与设备导轨。本项目的使用需求前面已经有提到，需求很明确。但是并不是所有IT设备都自带安装导轨，也并不是所有业主都会选择购买设备原厂安装导轨，成本控制是很重要的因素。本项目中同样IT设备并没有采购原厂安装导轨，所以需要配置设备安装导轨，常规的即L型设备支架，然而并不需要设备托盘，一副L型设备支架的承重满足30KG

即可，而一个托盘的承重在150KG，常规2U服务器达不到这样的重量。所以，只需要安装L型设备安装支架，如此在设备成本上也能节约一大笔费用。

前面讲到每个机柜12台2U的设备，那么L型设备支架的安装位置就可以确认下来，从第3U 位置开始，逢3的倍数安装即可。为何从3U位置开始？这也是个经验所得。1）、一般机房里会配置一个拉设备的平板拖车，这个推车常规的高度大概是15cm，也就是说刚好是在机柜的3U位置，当你上设备的时候，最下面这个设备，不会被这个小车挡住，从而影响你上设备；2）、下面留有一定的空间也可以很方便的收纳一些线缆，如网线、电源线；3）、这个位置大大减少了运维人员在维护的时候，误踢到的概率；4）、机房配置的运维操作台，显示器的VGA线缆长度一般为1.5米左右，太低了会发现线缆够不着了。5）、数字更容易记忆，从3U开始，只要记住是3的倍数即可，如果是其他数字，那么安装的位置依次为起始数字+3，相比之下不易于厂家出场人员安装实施，很有可能因为不同的安装工人，导致安装错位。综合以上几点，最终选择的这样的安装位置，在实际的项目中，可以根据业主的需求情况，充分考虑业主需求，量身定制。

其次，安装角规的前后距离应该控制多少。机柜里用于承重的4根立柱，称之为安装角规，对于标准机柜，安装角规之间的宽度值是固定的，可变的是前后的距离，以及安装角规距离门的距离。如果这点没有特别要求，厂家会跟进自己的组装方式进行组装机柜，一旦距离没有调整好，在后期IT 设备上架的时候就会暴露出问题。本项目在厂验的阶段，特别向厂家提出了角规安装上的细节要求：前角规距离前门100mm,前后角规间距700-800mm。厂验现场我们发现，前角规距离前门净空间只有800mm左右，经过协调，依然要求厂家按照技术规范书要求调整到100mm。这个要求，在后续的施工中成为一个关键性的要素，甚至还没等交付运行，IT 设备上架，即完成了验证。在工程即将结束的阶段，综合布线需要给每列机柜增加布置MPO预制光缆设施，而这100mm的空间，恰好能容纳MPO光缆所需的配套跳线盒前端部件。

当初提要求这样的距离主要考虑网络交换机上架之后需要留有一定的布线空间，为此特意测量了已有机房内的综合布线所需要的空间，这个空间就是100mm。而角规之间的距离700mm-800mm则是根据常规服务器长度尺寸要求设置的距离。在满足了服务器安装的要求之后，后安装角规至后门的空间则为PDU安装，以及后期IT设备布线所需要的空间，空间越大，实施越方便，维护越便捷。

第三，气密要求。为了尽可能的减少冷气未经过IT设备就流失，机柜的气密性要求尽可能的高，在安装完成IT设备之后，设备之间的空闲U数会安装盲板加以封堵，但也有盲

板无法覆盖到的地方，为此在机柜前端的角规与机柜其他部件的间隙大小就变得尤为重要，尽可能的减少缝隙，或者使用其他措施诸如封板对空隙封堵。本项目中的机柜，在调整了安装角规的位置之后，同样很好的解决了气密性的问题，可谓一举两得。

最后，布线离线空间。前面在讨论安装角规的时候提到，后安装角规至后门的空间是PDU 以及布线的空间。无论是否使用垂直理线架，空间都是一个最基本的条件，充裕的空间能够很好的解决多线缆的布置。所以本项目中即使没有配置垂直理线架，也有足够的空间完成布线。

四、弱电桥架系统设计

对于光纤桥架和网线桥架，通常会选择错层布置，但是本项目鉴于层高限制，不能实现高低错层布置，只能尽可能的利用高度空间，采取平面布置。这样就会出现一个新问题，光纤和网线桥架谁将处于外侧，谁又处于内侧。

根据本项目今后的IT 设备部署情况，在实际操作中，布防光纤的量要远远大于网线，在工程结束之后，IT 设备不会用到网线，所以选择了将网线桥架放置到了内侧，而光纤桥架放到了外侧，并通过一定的高度差实现桥架之间不会打架冲突。给今后运维中的布线也带来了便利，解决了布线需要爬到机柜顶部的情况，此时只需要正常的踩在梯子上即可完成光纤布线工作。

解决以往在布线中存在的操作不便，光纤套管直接伸入机柜，并且在下线口出预留部分可见管线，方便尾纤穿管。既能保护光缆，又方便穿线施工。

设计单位与施工单位在遇到此问题的时候，并没有考虑这个问题，在他们看来，施工的便捷性和低成本是考虑的首要因素，甚至在业主管理团队提出了以上的解决方案后，依然没有领会这样设计的初衷，导致成品依然略带瑕疵。由此可见，即使曾经设计或建造过很多数据中心机房，但没有做过运维，不了解运维工作，在建设中依然还是存在不足的。

五、检修管井

水冷系统的使用确实能让中大型数据中心在节能减排上占据优势，但是对于水冷系统也有一个重要的问题急需解决：如何解决水系统管道在机房内的布置从而使今后的维护更加便捷。

有条件的机房可以设立独立的空调风柜房，更彻底的将空调系统与机房系统隔离。但是本项目空间紧凑，在满足规定的机架数量的前提下，无法实现完全隔离，因此退而求其次，