谷歌云存储成本分析

谷歌云存储技术成本分析

一、应用云存储技术的既然趋势

当今世界是已经来到了一个信息大爆炸的时代，至少在未来5 年里，数据将以每年50%到60%的速度爆炸式增长，另外，企业的业务发展和合规性要求也要求企业延长数据的保留期。此外，现在的商业环境出现了越来越多的诉讼因素。这些都要求企业寻找一种全新的辅助存储方案。

新建数据越来越多，而且企业有很多的原因必须保留数据，不管是为了满足合规性要求，还是IP 的需要，或是为了重复使用它们或其他原因。总体上企业在长期保留数据方面通常有如下五个方面：

1、归档

2、本地数据保护（备份）

3、远程数据保护（灾难恢复）

4、合规性/ 诉讼

5、一般长期数据保留综上，归档存储解决方案似乎专注于企业数据的长期保存，这个领域经常会推出一些新的复杂技术和管理方案，相关成本远远超过简单购置更多存储设备的成本。

但是随着包括归档数据在内的各种数据的可访问需求的提高以及电子发现、建立数据保留库并确保数据恒久不变等新合规性要求的出现，迫使企业配置一个在线辅助存储级。如今大多数企业的主存储级已经爆满，这主要是因为过去的辅助存储级一

直被定义在离线存储上所致。因此在需要进行数据恢复、搜索或出于其他数据管理目的时，任何迁移到磁带的数据都不容易访问。

随之我们发现了一种新的趋势，可以解决企业的存储之痛，那就是与数据存储有关的各种云服务。目前基于云存储概念的网盘市场已经具体了诸如网易、腾讯、DBank(华为背景)、金山等诸多的知名企业。云存储成为网络经济下一个新的增长点似乎已经成为一种共识，知名企业的扎堆也使整个行业从一开始就面临着激烈的竞争。

与传统的存储设备相比，云存储不仅仅是一个硬件，而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心，通过应用软件来对外提供数据存储和业务访问服务。可以说，云存储除在数据存储方面比较有竞争力外，还更加强调它本身的服务特性。

二、云存储技术基础架构

云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。当云计算系统运算和处理的核心是大量数据的存储和管理时，云计算系统中就需要配置大量的存储设备，那么云计算系统就转变成为一个云存储系统，所以云存储是一个以数据存储和管理为核心的云计算系统。

云存储系统的结构模型由四层组成，分别是：存储层、基础管理层、

应用接口层和访问层

（一）存储层

存储层是云存储最基础的部分。云存储中的存储设备往往数量庞大且分布地域很广，彼此之间通过广域网、互联网或者FC光纤通道网络连接在一起。存储设备之上是一个统一存储设备管理系统，可以实现存储设备的逻辑虚拟化管理、多链路冗余管理，以及硬件设备的状态监控和故障维护。

（二）基础管理层

基础管理层是云存储最核心的部分。基础管理层通过集群、分布式文件系统和网格计算等技术，实现云存储中多个存储设备之间的协同工作，使多个的存储设备可以对外提供同一种服务，并提供更大更强更好的数据

访问性能。

CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问，同时，通过各种数据备份和容灾技术和措施可以保证云存储中的数据不会丢失，保证云存储自身的安全和稳定。

（三）应用接口层

应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型，开发不同的应用服务接口，提供不同的应用服务。比如视频监控应用平台、IPTV和视频点播应用平台、网络硬盘引用平台，远程数据备份应用平台等。

四）访问层

任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统，享受云存储服务。云存储运营单位不同，云存储提供的访问类型和访问手段也不同。

（五）技术前提

1、宽带网络的发展

2、技术

3、应用存储的发展

4、集群技术、网格技术和分布式文件系统

5、C DN内容分发、P2P技术、数据压缩技术

6、存储虚拟化技术、存储网络化管理技术

三、云存储低成本成亮点

现代企业管理，很强调设备的整体拥有成本TCO而不像过去只强调采购成本。

而云存储技术管理的成本，可分为二种，一个是系统管理人力及能源需求的降低，一个是减少因系统停机造成的业务中断，所增加的管理成本。

Google 的服务器超过200 万台，其中1/4 用来作为存储，这么多的存储设备，如果采用传统的盘阵，管理是个大问题，更何况如果这些盘阵还是来自不同的厂商所生产，那管理难度就更无法想象了。为了解决这个问题，google 才发展云存储这个概念。

云存储技术针对数据重要性采取不同的拷贝策略，并且拷贝的文件存放在不同的

服务器上，因此遭遇硬件损坏时，不管是硬盘或是服务器坏掉，服务始终不会终

止，而且因为采用索引的架构，系统会自动将读写指令导引到其它存

储节点，读写效能完全不受影响，管理人员只要更换硬件即可，数据也不会丢失，换上新的硬盘或是服务器后，系统会自动将文件拷贝回来，永远保持多份的文件，以避免数据的丢失。

扩容时只要安装好存储节点，接上网络，新增加的容量便会自动合并到存

储中，并且数据自动迁移到新存储节点，不需要做多余的设定，大量的降低了维护人员的工作量

在管理界面中可以看到每个存储节点及硬盘的使用状况、读写带宽，管理非常容易，不管使用哪家公司的服务器，都是同一个管理界面，一个管理人员可以轻松的管理几百台存储节点。

随着数据量的大幅增加，数据被读取的机会越来越小，根据2008 年Berkeley 大学的一份研究报告显示，在过去十年，数据读/ 写的比率已经从4:1 变为1：2 ，90%的数据从来没有被读取过。加上全球能源价格的高涨，面对这样的趋势，节能设计在今天变得非常重要。在数据中心，电力的成本很高，有些云存储技术会提供节能的功能，客户可以自行设定读写期限，超过期限没有被读写的文件，系统会将它迁移到节能区，节能区的服务器硬盘是spin-down 的，这样可以节省大量的电力，减少电力损耗，就是减少二氧化碳排放量，既可以降低使用成本也是每一个地球公民的义务。

云存储技术相对低廉的硬件采购成本及硬件冗余的架构，能在硬件损坏时，自动接管服务，并且不影响服务效能，数据也不会丢失，这样保证了服务的连续性，而节能的设计也对整体存储拥有成本的降低，产生了决定性的影响。

开发云存储战略可能会很复杂，而且对安全性要求也很高。但是，从早期用户的使用经验来看，云存储的真正优势在于能为用户节约成本。分析师称采用基于云的服