硬件部署方案
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
一年费用=10980*12=131760元。
该方案的优点：
来自百度文库容量自由扩展，同时省去运营成本和研发成本，开发速度会大大提高；
前期如果访问量和数据量不是很大时候，它的投入是比较少的。
但是它的缺点也是明显的，它的成本在整个运营的过程中，都要支付这一笔费用，当数据量达到PB级别时候，每年投入会过千万。
二、方案二搭建自家存储系统
图3系统部署图
从图中可以看出，系统可靠并安全运行，至少要两台主机，互为主从，主机参数选型如下：
联想ThinkServer RD630 E5-2609/2×4GB/2×1TB
基本资料
产品型号
RD630 E5-2609/2×4GB/2×1TB
产品类型
机架式
产品结构
2U
处理器
CPU系列
至强处理器E5系列
CPU核心
流量费用
流出流量
费用
0 GB - 500 GB
0.75 元/GB
500 GB - 2 TB
0.7 元/GB
2 TB - 10 TB
0.65 元/GB
大于10 TB
0.6 元/GB
数据请求费用
数据请求
费用
Get/Head Object
每 10000 次 0.01 元
其他所有请求
每 10000 次 0.01 元
0.0093 元/GB * 天 (约 0.28 元/GB * 月)
2 TB - 10 TB
0.0083 元/GB * 天 (约 0.25 元/GB * 月)
10 TB - 50 TB
0.0077 元/GB * 天 (约 0.23 元/GB * 月)
大于 50 TB
0.007 元/GB * 天 (约 0.21 元/GB * 月)
面谈
请求次数(元/万次*天)
PUT/POST/DELETE/GET/HEAD
0.01
从三家收费标准来看，百度收费是最省钱，可牛和阿里价格相近。
以2TB的存储容量，每天请求次数为1000万,流出流量为600G作为应用例子，计算存储成本。
每月总费用=(2000*0.009+1000*0.01+600*0.6)*30=10980元
百度收费标准：
类别
阶梯价格
存储容量（元/GB *天）
0 - 500 GB
500 GB - 2 TB
2 TB - 10 TB
› 10 TB
0.01
0.009
0.008
面谈
流出流量（元/GB *天）
0 - 500 GB
500 GB - 2 TB
2 TB - 10 TB
› 10 TB
0.65
0.6
0.55
硬件
1.系统要求
沟通平台集微博+IM+店铺+LBS＋搜索＋游戏，目标用户规模为亿级以上，信息量巨大，海量数据存储和大规模并发是系统的一个瓶颈问题。用1000万用户量作个估算，每人上传10张图片/月，大小为20k；发布微博100条/月，每条400字节，数据量为：
10000000*20*10/1000+10000000*100*400/1000/1000=2400G=2.4TB/月
550元
1核Xeon
512MB
40GB
1Mbps
69.4元
694元
1核Xeon
1.5GB
80GB
2Mbps
145.8元
1458元
2核Xeon
1.5GB
130GB
5Mbps
335.80元
3358元
2核Xeon
2.5GB
230GB
5Mbps
415.80元
4158元
4核Xeon
4GB
480GB
5Mbps
669.80元
尺寸
87.6×442×720.6mm
重量
≤26.5kg
价格为:12000元。
主机也可以选择云主机服务器，它的特点是可以灵活配置CPU数量、内存、带宽和硬盘容量。阿里云主机不同配置，会收取不同的费用，如配置与费用关系如下：
CPU
内存
数据盘
带宽
价格（月）
价格（年）
1核Xeon
512MB
0GB
1Mbps
55元
一年之后，数据量为240TB，加上数据冗余及系统预留配额，硬盘数据容量要接近1PB，可见数据量巨大。
2.存储方案选择
一、方案一租用云服务
目前云服务主要提供商主要有百度云、阿里云、可牛云，他们的收费模式大致相同，都收取空间费用、数据请求量和流量费用。计费公式为:
存储容量+流出流量+请求次数费用=费用总计
图1 租用自建比较
3.应用服务器部署
平台的应用包括微博、IM服务器、店铺应用服务器、LBS应用服务器、数据搜索应用服务器、游戏应用服务器，数据库服务器，WEB站点，其简化部署图如下：
图2 系统简化部署图
考虑数据冗余、系统冷热备份、大规模数据并发问题，要保证数据安全、系统可用性强及响应时间短，要加入主从数据库服务器，同时要为应用配置群集和负载分流。主从数据库采用读写分离方式，并且将数据进行水平与垂直分割，将他们分片分表存储，提高读写效率。同时采用就近原则，将数据尽可能放入内存中。因此，系统的部署图如下：
可牛云收费
存储空间：
空间范围价格
0 GB - 1 TB0.50/GB/月
1 TB - 50 TB0.45/GB/月
50 TB - 100 TB0.40/GB/月
> 100 TB和他们协商
流量：
流量范围价格
上传流量：无限制免费
下载流量：0 GB - 2 TB0.50/GB
2 TB - 100 TB0.45/GB
名称
规格及功能
数量
单价
总价
存储服务器
Dell™ PowerEdge™ R200 Server
英特尔 奔腾双核处理器 E2200 2.2GHz, 1MB二级缓存, 800MHz前端总线, 65W
2TB 3.5-inch 7.2K RPM SATA II Hard Drive*2 2GB (2x1024), DDR2 800MHz ECC 2R 内存
两个机房收费相差不多，选用双线机房2U，一年成本为8500。
总成本为:8500+16000=24500元。
如果访问量增加，可以加dataserver节点，两台第一年成本为24500,以后每年会降至17000。加上请人员进行运营维护，每年人员成本四万/人，总共为64500元。
三、租用与自建比较：
对比租用云存储和自建存储系统，可以得出：租用云存储系统在系统访问量不是很大，数据量也比较小的情况下，它是很省钱的，也无需花购买服务器的钱。当数据量大的时候，自建系统的成本优势就会体现出来了，下面的图显示租用和自建存储系统投入与用户规模比较：
6698元
4核Xeon
8GB
730GB
5Mbps
936.80元
9368元
8核Xeon
16GB
730GB
5Mbps
1486.80元
14868元
租用云主机的优点是前期无需投入设备购买费用，计算能力可以按需要调整，在系统用户规模不可预知的情况下，使用云主机的成本比较划算。
对系统主机数量，可以按用户规模来分阶段来增加。它们的关系如下表：
可以利用FastDFS分布式技术来搭建自家的存储系统。系统的架构如下图：
两台NameServer互为热备，但有一个是主设备；当主备挂起的时候，可以用另一台充当主备。数据服务器充当存储单元，第一份数据会放到两个以上的存储单元中。从最小可运行的角度来配置，系统需要两台主机可以运行。如果要配置2TB的容量的话，只要在这两台主机上布置4TB磁盘，每台2TB。主机配置如下：
2
8,000
16，000
存储服务器配置不是很高，它的主要工作是调度数据服务器，将文件分解存储。
调查了解到广州较场西机房服务器托管收费标准：
单IP 百兆共享 1U 7500元/年 ； 2U 8000元/年
广州人民中双线机房服务器托管收费标准：
双线 百兆共享 1U 8000元/年 ； 2U 8500元/年
四核
总线规格
QPI 6.4GT/s
CPU型号
E5-2609
CPU主频
2.4GHz
三级缓存
10M
标配CPU数目
1个
主板
主板插槽
2×PCI-E 3.0 x16
3×PCI-E 3.0 x8
内存
内存类型
ECC DDR3
标配内存
2×4G
内存插槽数
20
最大内存容量
320G
存储
硬盘接口类型
SATA,3.5英寸硬盘
100 TB - 200 TB0.40/GB
> 200 TB和他们协商
数据请求：
请求方式价格
PUT/DELETE0.10/万次请求
GET0.01/万次请求
阿里云的收费用标准：
存储费用
存储空间
费用
0 GB - 500 GB
0.01 元/GB * 天 (约 0.3 元/GB * 月)
500 GB - 2 TB
标配硬盘
2×1TB
存储控制器
R500 ADAPTER RAID0
硬盘热插拔
支持
光驱
带光驱,SLIM DVDRW SATA光驱
其它
工作环境
工作温度：10℃-35℃工作湿度：8%-80%
存储环境
储存温度：-40℃-70℃储存湿度：8%-93%
电源
单电源
最大功率
800W
管理工具
DIT高级版/易管理软件：EASYMANAGE管理软件/有导航/系统用户光盘/高级导轨
阶段
用户数量/万人
主机数量
系统存储容量
带宽
1
10
2
2TB
10M
2
50
8
15TB
50M
3
100
15-20
200TB
100M
4
1000
120
1PB
1G
在比较讨论后，存储系统采用自己搭建方案，系统部署图成为：
图4 总体系统部署图
该方案的优点：
来自百度文库容量自由扩展，同时省去运营成本和研发成本，开发速度会大大提高；
前期如果访问量和数据量不是很大时候，它的投入是比较少的。
但是它的缺点也是明显的，它的成本在整个运营的过程中，都要支付这一笔费用，当数据量达到PB级别时候，每年投入会过千万。
二、方案二搭建自家存储系统
图3系统部署图
从图中可以看出，系统可靠并安全运行，至少要两台主机，互为主从，主机参数选型如下：
联想ThinkServer RD630 E5-2609/2×4GB/2×1TB
基本资料
产品型号
RD630 E5-2609/2×4GB/2×1TB
产品类型
机架式
产品结构
2U
处理器
CPU系列
至强处理器E5系列
CPU核心
流量费用
流出流量
费用
0 GB - 500 GB
0.75 元/GB
500 GB - 2 TB
0.7 元/GB
2 TB - 10 TB
0.65 元/GB
大于10 TB
0.6 元/GB
数据请求费用
数据请求
费用
Get/Head Object
每 10000 次 0.01 元
其他所有请求
每 10000 次 0.01 元
0.0093 元/GB * 天 (约 0.28 元/GB * 月)
2 TB - 10 TB
0.0083 元/GB * 天 (约 0.25 元/GB * 月)
10 TB - 50 TB
0.0077 元/GB * 天 (约 0.23 元/GB * 月)
大于 50 TB
0.007 元/GB * 天 (约 0.21 元/GB * 月)
面谈
请求次数(元/万次*天)
PUT/POST/DELETE/GET/HEAD
0.01
从三家收费标准来看，百度收费是最省钱，可牛和阿里价格相近。
以2TB的存储容量，每天请求次数为1000万,流出流量为600G作为应用例子，计算存储成本。
每月总费用=(2000*0.009+1000*0.01+600*0.6)*30=10980元
百度收费标准：
类别
阶梯价格
存储容量（元/GB *天）
0 - 500 GB
500 GB - 2 TB
2 TB - 10 TB
› 10 TB
0.01
0.009
0.008
面谈
流出流量（元/GB *天）
0 - 500 GB
500 GB - 2 TB
2 TB - 10 TB
› 10 TB
0.65
0.6
0.55
硬件
1.系统要求
沟通平台集微博+IM+店铺+LBS＋搜索＋游戏，目标用户规模为亿级以上，信息量巨大，海量数据存储和大规模并发是系统的一个瓶颈问题。用1000万用户量作个估算，每人上传10张图片/月，大小为20k；发布微博100条/月，每条400字节，数据量为：
10000000*20*10/1000+10000000*100*400/1000/1000=2400G=2.4TB/月
550元
1核Xeon
512MB
40GB
1Mbps
69.4元
694元
1核Xeon
1.5GB
80GB
2Mbps
145.8元
1458元
2核Xeon
1.5GB
130GB
5Mbps
335.80元
3358元
2核Xeon
2.5GB
230GB
5Mbps
415.80元
4158元
4核Xeon
4GB
480GB
5Mbps
669.80元
尺寸
87.6×442×720.6mm
重量
≤26.5kg
价格为:12000元。
主机也可以选择云主机服务器，它的特点是可以灵活配置CPU数量、内存、带宽和硬盘容量。阿里云主机不同配置，会收取不同的费用，如配置与费用关系如下：
CPU
内存
数据盘
带宽
价格（月）
价格（年）
1核Xeon
512MB
0GB
1Mbps
55元
一年之后，数据量为240TB，加上数据冗余及系统预留配额，硬盘数据容量要接近1PB，可见数据量巨大。
2.存储方案选择
一、方案一租用云服务
目前云服务主要提供商主要有百度云、阿里云、可牛云，他们的收费模式大致相同，都收取空间费用、数据请求量和流量费用。计费公式为:
存储容量+流出流量+请求次数费用=费用总计
图1 租用自建比较
3.应用服务器部署
平台的应用包括微博、IM服务器、店铺应用服务器、LBS应用服务器、数据搜索应用服务器、游戏应用服务器，数据库服务器，WEB站点，其简化部署图如下：
图2 系统简化部署图
考虑数据冗余、系统冷热备份、大规模数据并发问题，要保证数据安全、系统可用性强及响应时间短，要加入主从数据库服务器，同时要为应用配置群集和负载分流。主从数据库采用读写分离方式，并且将数据进行水平与垂直分割，将他们分片分表存储，提高读写效率。同时采用就近原则，将数据尽可能放入内存中。因此，系统的部署图如下：
可牛云收费
存储空间：
空间范围价格
0 GB - 1 TB0.50/GB/月
1 TB - 50 TB0.45/GB/月
50 TB - 100 TB0.40/GB/月
> 100 TB和他们协商
流量：
流量范围价格
上传流量：无限制免费
下载流量：0 GB - 2 TB0.50/GB
2 TB - 100 TB0.45/GB
名称
规格及功能
数量
单价
总价
存储服务器
Dell™ PowerEdge™ R200 Server
英特尔 奔腾双核处理器 E2200 2.2GHz, 1MB二级缓存, 800MHz前端总线, 65W
2TB 3.5-inch 7.2K RPM SATA II Hard Drive*2 2GB (2x1024), DDR2 800MHz ECC 2R 内存
两个机房收费相差不多，选用双线机房2U，一年成本为8500。
总成本为:8500+16000=24500元。
如果访问量增加，可以加dataserver节点，两台第一年成本为24500,以后每年会降至17000。加上请人员进行运营维护，每年人员成本四万/人，总共为64500元。
三、租用与自建比较：
对比租用云存储和自建存储系统，可以得出：租用云存储系统在系统访问量不是很大，数据量也比较小的情况下，它是很省钱的，也无需花购买服务器的钱。当数据量大的时候，自建系统的成本优势就会体现出来了，下面的图显示租用和自建存储系统投入与用户规模比较：
6698元
4核Xeon
8GB
730GB
5Mbps
936.80元
9368元
8核Xeon
16GB
730GB
5Mbps
1486.80元
14868元
租用云主机的优点是前期无需投入设备购买费用，计算能力可以按需要调整，在系统用户规模不可预知的情况下，使用云主机的成本比较划算。
对系统主机数量，可以按用户规模来分阶段来增加。它们的关系如下表：
可以利用FastDFS分布式技术来搭建自家的存储系统。系统的架构如下图：
两台NameServer互为热备，但有一个是主设备；当主备挂起的时候，可以用另一台充当主备。数据服务器充当存储单元，第一份数据会放到两个以上的存储单元中。从最小可运行的角度来配置，系统需要两台主机可以运行。如果要配置2TB的容量的话，只要在这两台主机上布置4TB磁盘，每台2TB。主机配置如下：
2
8,000
16，000
存储服务器配置不是很高，它的主要工作是调度数据服务器，将文件分解存储。
调查了解到广州较场西机房服务器托管收费标准：
单IP 百兆共享 1U 7500元/年 ； 2U 8000元/年
广州人民中双线机房服务器托管收费标准：
双线 百兆共享 1U 8000元/年 ； 2U 8500元/年
四核
总线规格
QPI 6.4GT/s
CPU型号
E5-2609
CPU主频
2.4GHz
三级缓存
10M
标配CPU数目
1个
主板
主板插槽
2×PCI-E 3.0 x16
3×PCI-E 3.0 x8
内存
内存类型
ECC DDR3
标配内存
2×4G
内存插槽数
20
最大内存容量
320G
存储
硬盘接口类型
SATA,3.5英寸硬盘
100 TB - 200 TB0.40/GB
> 200 TB和他们协商
数据请求：
请求方式价格
PUT/DELETE0.10/万次请求
GET0.01/万次请求
阿里云的收费用标准：
存储费用
存储空间
费用
0 GB - 500 GB
0.01 元/GB * 天 (约 0.3 元/GB * 月)
500 GB - 2 TB
标配硬盘
2×1TB
存储控制器
R500 ADAPTER RAID0
硬盘热插拔
支持
光驱
带光驱,SLIM DVDRW SATA光驱
其它
工作环境
工作温度：10℃-35℃工作湿度：8%-80%
存储环境
储存温度：-40℃-70℃储存湿度：8%-93%
电源
单电源
最大功率
800W
管理工具
DIT高级版/易管理软件：EASYMANAGE管理软件/有导航/系统用户光盘/高级导轨
阶段
用户数量/万人
主机数量
系统存储容量
带宽
1
10
2
2TB
10M
2
50
8
15TB
50M
3
100
15-20
200TB
100M
4
1000
120
1PB
1G
在比较讨论后，存储系统采用自己搭建方案，系统部署图成为：
图4 总体系统部署图