01-07 国内外数据中心方案介绍

35
内部资料 注意保密
内部展示
36
内部资料 注意保密
建设过程
37
内部资料 注意保密
制冷系统
38
内部资料 注意保密
制冷系统
39
内部资料 注意保密
冷却塔、干冷器及蓄水罐
40
内部资料 注意保密
冷却系统方案
41
内部资料 注意保密
带干冷器的冷却塔
42
内部资料 注意保密
冷却系统建设流程
43
内部资料 注意保密
拥有超过300天的阳光和几乎 没有遭遇自然灾害的亚利桑 纳州是美国理想的重要数据 中心建设地点
微软都柏林数据中心
国外大型数据中心案例-2
苹果在美国北卡罗莱纳州在建的数据中心 (1)4.8兆瓦的沼气发电厂；（2）变电站；（ 3）500000平方英尺的数据中心；（4） 21000平方英尺的数据中心；（5） 100英 亩的太阳能农场，能产生20兆瓦的电力
选址、布局、土建、结构等 电力容量规划、配电方案、UPS系统、综合布线、防雷接地等 环境要求、制冷量需求、制冷设备、制冷方式、系统管路、 气流组织、节能技术等 消防系统、照明系统等
包含提供数据的计算、存储、转发、发布等功能的各种服务器 网络架构、组网技术、高可用方案、网络布线等 监控包含供配电、UPS、空调、温湿度、漏水、消防、安防等 基础设施+环境+IT
57
内部资料 注意保密
Google比利时圣吉兰（Saint Ghislain）数据中心
58
内部资料 注意保密
Google 数据中心的选址标准
1. 大量的廉价电力； 2. 绿色能源，更注重可再生能源； 3. 靠近河流或湖泊；（设备冷却需要大量水源） 4. 用地广阔；（隐秘性和安全性） 5. 和其它数据中心的距离；（数据中心之间的快速 链接） 6. 税收优惠。
76
内部资料 注意保密
混风装置
空气进入第三个房 间，控制了混合空 气的湿度和温度
77
内部资料 注意保密
水喷雾
空气进入数据中心之前， 运动到最后一步。少量 喷雾水进入空气中。用 它来冷却空气。 一个没有拍摄照片的房 间里面布满了泵和反渗 透过滤网，使得水超级 纯净，使其在制冷时工 作良好。一个最终的过 滤网确保没有水进入数 据中心。 这儿是喷水阵列
4
内部资料 注意保密
APPLE 数据中心介绍
（1）俄勒冈州普赖恩维尔新数据中心，当地的第 二座数据中心也即将建成，而且新的冷存储设置 也已破土动工 （2）加利福尼亚州纽瓦克市 （3）北卡罗来纳州梅登镇 （4）公司库比蒂诺总部 （5）内华达州里诺市
5
内部资料 注意保密
APPLE北卡罗莱纳州卡托巴县 Maiden 数据中心
91
内部资料 注意保密
数据中心设计趋势-1
低PUE与DCP
效率并不是有效的指标
92
内部资料 注意保密
典型数据中心的电能流向
93
内部资料 注意保密
结构性节能
94
内部资料 注意保密
数据中心设计趋势-2
模块化设计
分区设计 1、安全防范角度——隔离风险，设备进行归类，划区安置，配备相应 的消防系统和监控系统 2、节能环保角度——温度控制分区 3、机房安全管理角度——分区管理 模块化设计 1、模块化规划 2、模块化施工 3、模块化设备
Google在比利时的一个数据中心 根据当地的条件，使用蒸发塔， 没有使用冷水机组。抛弃制冷剂 ，改用自然空气为数据中心降温
Facebook在俄勒冈州普林维尔的数 据中心。使用277V交流电源；100% 使用外部空气冷却，无需空调
Google在芬兰使用海水冷却，冷却服务器的海水来自芬兰湾，冷却后的海水返 回芬兰湾，返回的海水温度升高不多。
三菱高压直流
86
内部资料 注意保密
三菱高压直流
87
内部资料 注意保密
三菱高压直流
88
内部资料 注意保密
国内高压直流设备厂家
艾默生 金威源 中兴
89
内部资料 注意保密
百度在线机房（HP设计）
90
内部资料 注意保密
数据中心的系统
数据中心包含基础建筑、电气系统、制冷系统、消防系统、数据中心服务器、 网络系统、运维系统等。 基础建筑 电气系统 制冷系统 消防照明 IT服务器 网络系统 集中监控系统
78
内部资料 注意保密
高压细水雾喷头
79
内部资料 注意保密
蒙特加湿介质
80
内部资料 注意保密
排气扇
81
内部资料 注意保密
三联机柜
Βιβλιοθήκη Baidu82
内部资料 注意保密
蓄电池备电的并柜
83
内部资料 注意保密
服务器的底座与主板
84
内部资料 注意保密
三菱MELUPS DECO 高压直流
85
内部资料 注意保密
内部培训
国内外数据中心方案介绍
张海涛 2014年 运维管理部
1
内部资料 注意保密
国外大型数据中心案例-1
美国新泽西数据中心（世界最大）
有超过77000平方 米的可用空间, 美 国最大的数据中心 (位于纽约城的大 都市地区）。
美国凤凰城数据中心
曾是世界上最大的数据中心 和最早被授予Tier III 设计认 证的仓储式模块化数据中心
60
内部资料 注意保密
Google 水冷服务器 未来技术 侧视图
61
内部资料 注意保密
谷歌水冷服务器 俯视图
62
内部资料 注意保密
• 散热片俯视图
63
内部资料 注意保密
谷歌水冷服务器机柜
64
内部资料 注意保密
水冷服务器机房截面图
65
内部资料 注意保密
Facebook 俄勒冈州普赖恩维尔数据中心
（1）4.8兆瓦的沼气发电厂(10兆 瓦) （2）变电站 （3）500000平方英尺的数据中 心 约46451.52平方米 （4）21000平方英尺的数据中心 约1950.96384平方米 （5）100英亩的太阳能农场，能 产生20兆瓦的电力
6
内部资料 注意保密
100%可再生能源数据中心
7
内部资料 注意保密
49
内部资料 注意保密
热通道
50
内部资料 注意保密
微模块
51
内部资料 注意保密
三联机柜
52
内部资料 注意保密
微模块 水冷冷却模块
53
内部资料 注意保密
俯视图
54
内部资料 注意保密
蓄冷罐
55
内部资料 注意保密
Google 俄勒冈州 Dalles（达尔斯）数据中心
56
内部资料 注意保密
哥伦比亚河畔的Dalles 数据中心
66
内部资料 注意保密
APPLE 俄勒冈州普赖恩维尔数据中心
1-施工压坑 2-用于建设的临时拖车 3-战术数据中心 4-为苹果数据中心地点
67
内部资料 注意保密
APPLE 普赖恩维尔 战术数据中心
68
内部资料 注意保密
Facebook 俄勒冈州普赖恩维尔数据中心
69
内部资料 注意保密
数据中心图片
12
内部资料 注意保密
APPLE内华达州里诺科技园 数据中心
13
内部资料 注意保密
科技园规划图
14
内部资料 注意保密
APPLE内华达州里诺科技园 数据中心
2013年7月初 2013年8月（5周后） 苹果在美国国内的第四个数据中心，将为iTunes、iBookstore、App Store和iCloud服务提供支持 占地面积345英亩
3
Facebook水喷雾温湿度调节
内部资料 注意保密
国外大型数据中心案例-3
Oracle奥斯丁数据中心
• 超过 20,000 服务器 • 全世界最大的 Dell/Linux 数据中心 • 每星期增加100服务器
• 超过 5,000 TB 数据 • 全世界最大的 NetApp 数据中心 • 每月增加 60TBs 数据 • 支持超过 400 其他客户的关键应用 • 为超过65000甲骨文员工服务 • 超过7000平方米
22
内部资料 注意保密
冷却空气在数据中心的流动图
23
内部资料 注意保密
应急备用电源
柴油发电机
24
内部资料 注意保密
雅虎数据中心 鸡笼设计 2010年
25
内部资料 注意保密
雅虎数据中心
26
内部资料 注意保密
HP 模块化“蝴蝶”数据中心设计 Flexible DC
27
内部资料 注意保密
模块布局
15
内部资料 注意保密
里诺数据中心 一期数据中心
16
内部资料 注意保密
水管
17
内部资料 注意保密
排水设施
18
内部资料 注意保密
微软都柏林数据中心
2009年7月1日投入运行
19
内部资料 注意保密
微软都柏林数据中心鸟瞰图
20
内部资料 注意保密
屋顶自然风冷却单元
21
内部资料 注意保密
内部结构
规划未 来可扩 展至100 兆瓦
用户主要为美国通 信公司AboveNet、 AT&T、Level3、 Verizon 、Qwest 等
占地面积三十万三千平 方英尺，并使用5.4兆瓦 的电力，并且未来有可 能扩大到22.2兆瓦。采 用自然风冷却设计，也 是微软最节能的设计之 一
2
内部资料 注意保密
美国亚利桑纳州数据中心
59
内部资料 注意保密
Google 交流直供 服务器自带电池
在数据中心，将电源放置在配电室，并将其电压降 低到所需值。这造成了很多次的能源转换。减少转换 次数，可以节省成本和电力。让每次转换更有效率， 也可以节约电力 传统模式下，最大的浪费来自UPS
Google的做法是将电池直接放 在服务器上，这消除了三次转换（仅 需要一次）。使用高效的AC/DC， 可以节约很多能源
充足的供电 丰富的数据输送网 干燥的气候 干净的地下水源 地价不高充足的日照可建立太阳能板 建造成本适中 当地税收的鼓励政策
整个建筑预算是 1600 万美元 其中包括400 万的基础设施 460 万的行政办公楼（38,000平方英尺） 680 多万的数据处理中心楼 一个临时的装载码头区域 总共预计50,570平方英尺（（约4700平方米）
租赁空调系统和永久性空调系统的安装示意图
44
内部资料 注意保密
谷歌数据中心主干管路的模块化扩展建设
45
内部资料 注意保密
谷歌数据中心主干管路的模块化扩展建设
46
内部资料 注意保密
传统数据中心和模块化数据中心的项目进度表比较
47
内部资料 注意保密
隔热塑料幕帘 蓄电池
48
内部资料 注意保密
水管路 伸缩弯头
从中央管理区延伸出四个预制区域或模块。该解决方案采用工业化组件以提高成本效 率，并通过多种电力分配与散热分布选项简化构建流程。
28
内部资料 注意保密
中央管理区
29
内部资料 注意保密
空气制冷系统
30
内部资料 注意保密
HP Flexible DC
31
内部资料 注意保密
Google 全球数据中心 （至2010年）
95
内部资料 注意保密
数据中心设计趋势-3
电源管理采用主动能源管理
母线到机柜 提高机柜配电分配的灵活性、扩展性
96
内部资料 注意保密
数据中心设计趋势-4
太阳能 风能 燃料电池 沼气（燃气轮机） 水力发电
可再生能源及绿色能源的使用
97
内部资料 注意保密
数据中心设计趋势-5
节能
1、Freecooling 天然冷空气-选址 冷水利用-江河湖海，直冷、间接冷却 2、机房废热的利用 办公取暖、温室 3、机房环境温度的提升 22℃ 27℃ 32℃
70
内部资料 注意保密
数据中心图片
71
内部资料 注意保密
数据中心监控
72
内部资料 注意保密
Facebook 数据中心制冷系统原理图
73
内部资料 注意保密
过滤墙
一系列巨大的“处理”空气的房 间。 第一间房是过滤空气。 第二间房是进一步过滤。
74
内部资料 注意保密
风扇墙
75
内部资料 注意保密
过滤室
98
内部资料 注意保密
数据中心设计趋势-6
无架空地板设计
无架空地板
99
内部资料 注意保密
数据中心设计趋势-7 供电系统
http://www.google.com/about/datacenters/gallery/#/tech
32
内部资料 注意保密
Google Iowa Council Bluffs数据中心
33
内部资料 注意保密
Google Iowa Council Bluffs数据中心
34
内部资料 注意保密
色彩的应用
数据中心航拍图
8
内部资料 注意保密
太阳能发电场
9
内部资料 注意保密
燃料电池发电场
10
内部资料 注意保密
冷却塔 蓄水罐
11
内部资料 注意保密
拆迁
苹果新数据中心的选址在北卡罗拉那州的Maiden小镇，这里的常住居民仅有3200人。Donnie Fulbright夫妇住在该镇已有34年， 他们的房子连带花园绿地总占地不到1英亩，当初购买只花了6000美元。 据称老夫妇并不愿意搬离自己的老房子，先后拒绝了苹果的两次报价。现年62岁的太太Kathy Fulbright对媒体表示：“他们让我 们开个价，于是我们就说了。”这个开价也就是现在的170万美元。利用这笔“拆迁款”，他们买下了一栋宽敞的新居，房屋面 积4200平方英尺(390平方米)，总占地49英亩。