谷歌云存储技术成本分析一、应用云存储技术的既然趋势当今世界是已经来到了一个信息大爆炸的时代，至少在未来5年里，数据将以每年50%到60%的速度爆炸式增长，另外，企业的业务发展和合规性要求也要求企业延长数据的保留期。此外，现在的商业环境出现了越来越多的诉讼因素。这些都要求企业寻找一种全新的辅助存储方案。新建数据越来越多，而且企业有很多的原因必须保留数据，不管是为了满足合规性要求，还是IP的需要，或是为了重复使用它们或其他原因。总体上企业在长期保留数据方面通常有如下五个方面：1、归档 2、本地数据保护（备份） 3、远程数据保护（灾难恢复） 4、合规性/诉讼 5、一般长期数据保留 综上，归档存储解决方案似乎专注于企业数据的长期保存，这个领域经常会推出一些新的复杂技术和管理方案，相关成本远远超过简单购置更多存储设备的成本。但是随着包括归档数据在内的各种数据的可访问需求的提高以及电子发现、建立数据保留库并确保数据恒久不变等新合规性要求的出现，迫使企业配置一个在线辅助存储级。如今大多数企业的主存储级已经爆满，这主要是因为过去的辅助存储级一直被定义在离线存储上所致。 因此在需要进行数据恢复、搜索或出于其他数据管理目的时，任何迁移到磁带的数据都不容易访问。随之我们发现了一种新的趋势，可以解决企业的存储之痛，那就是与数据存储有关的各种云服务。目前基于云存储概念的网盘市场已经具体了诸如网易、腾讯、DBank（华为背景）、金山等诸多的知名企业。云存储成为网络经济下一个新的增长点似乎已经成为一种共识，知名企业的扎堆也使整个行业从一开始就面临着激烈的竞争。与传统的存储设备相比，云存储不仅仅是一个硬件，而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心，通过应用软件来对外提供数据存储和业务访问服务。可以说，云存储除在数据存储方面比较有竞争力外，还更加强调它本身的服务特性。二、云存储技术基础架构云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。 当云计算系统运算和处理的核心是大量数据的存储和管理时，云计算系统中就需要配置大量的存储设备，那么云计算系统就转变成为一个云存储系统，所以云存储是一个以数据存储和管理为核心的云计算系统。云存储系统的结构模型由四层组成，分别是：存储层、基础管理层、应用接口层和访问层。（一）存储层存储层是云存储最基础的部分。云存储中的存储设备往往数量庞大且分布地域很广，彼此之间通过广域网、互联网或者 FC光纤通道网络连接在一起。存储设备之上是一个统一存储设备管理系统，可以实现存储设备的逻辑虚拟化管理、多链路冗余管理，以及硬件设备的状态监控和故障维护。（二）基础管理层基础管理层是云存储最核心的部分。基础管理层通过集群、分布式文件系统和网格计算等技术，实现云存储中多个存储设备之间的协同工作，使多个的存储设备可以对外提供同一种服务，并提供更大更强更好的数据访问性能。 CDN内容分发系统、数据加密技术保证云存储中的数据不会被未授权的用户所访问，同时，通过各种数据备份和容灾技术和措施可以保证云存储中的数据不会丢失，保证云存储自身的安全和稳定。（三）应用接口层应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型，开发不同的应用服务接口，提供不同的应用服务。比如视频监控应用平台、IPTV和视频点播应用平台、网络硬盘引用平台，远程数据备份应用平台等。 （四）访问层任何一个授权用户都可以通过标准的公用应用接口来登录云存储系统，享受云存储服务。云存储运营单位不同，云存储提供的访问类型和访问手段也不同。（五）技术前提1、宽带网络的发展2、 WEB2.0技术 3、应用存储的发展 4、集群技术、网格技术和分布式文件系统5、CDN内容分发、P2P技术、数据压缩技术6、存储虚拟化技术、存储网络化管理技术三、云存储低成本成亮点现代企业管理，很强调设备的整体拥有成本TCO，而不像过去只强调采购成本。而云存储技术管理的成本，可分为二种，一个是系统管理人力及能源需求的降低，一个是减少因系统停机造成的业务中断，所增加的管理成本。Google 的服务器超过200万台，其中1/4用来作为存储，这么多的存储设备，如果采用传统的盘阵，管理是个大问题，更何况如果这些盘阵还是来自不同的厂商所生产，那管理难度就更无法想象了。为了解决这个问题，google 才发展云存储这个概念。云存储技术针对数据重要性采取不同的拷贝策略，并且拷贝的文件存放在不同的服务器上，因此遭遇硬件损坏时，不管是硬盘或是服务器坏掉，服务始终不会终止，而且因为采用索引的架构，系统会自动将读写指令导引到其它存储节点，读写效能完全不受影响，管理人员只要更换硬件即可，数据也不会丢失，换上新的硬盘或是服务器后，系统会自动将文件拷贝回来，永远保持多份的文件，以避免数据的丢失。扩容时只要安装好存储节点，接上网络，新增加的容量便会自动合并到存储中，并且数据自动迁移到新存储节点，不需要做多余的设定，大量的降低了维护人员的工作量。在管理界面中可以看到每个存储节点及硬盘的使用状况、读写带宽，管理非常容易，不管使用哪家公司的服务器，都是同一个管理界面，一个管理人员可以轻松的管理几百台存储节点。随着数据量的大幅增加，数据被读取的机会越来越小，根据2008年 Berkeley 大学的一份研究报告显示，在过去十年，数据读/写的比率已经从 4:1 变为1：2 ，90%的数据从来没有被读取过。加上全球能源价格的高涨，面对这样的趋势，节能设计在今天变得非常重要。在数据中心，电力的成本很高，有些云存储技术会提供节能的功能，客户可以自行设定读写期限，超过期限没有被读写的文件，系统会将它迁移到节能区，节能区的服务器硬盘是spin-down的，这样可以节省大量的电力，减少电力损耗，就是减少二氧化碳排放量，既可以降低使用成本也是每一个地球公民的义务。云存储技术相对低廉的硬件采购成本及硬件冗余的架构，能在硬件损坏时，自动接管服务，并且不影响服务效能，数据也不会丢失，这样保证了服务的连续性，而节能的设计也对整体存储拥有成本的降低，产生了决定性的影响。开发云存储战略可能会很复杂，而且对安全性要求也很高。但是，从早期用户的使用经验来看，云存储的真正优势在于能为用户节约成本。分析师称采用基于云的服务可以节约IT支出，因为云计算采用共享的基础设施，并将特定成本由资本费用转为运行费用。 同时，竞争会推动成本进一步降低，尤其大用户更能享受到此类优惠。例如，亚马逊表示，如果存储总量超过50TB，则每月每GB 费用从15美分降至12美分，而且在6月，它的数据转移成本降低至每GB 3美分。 一个早期用户Peter Hedlund（弗吉尼亚人文科学基金会Encyclopedia Virginia的一个程序员）说，他对于云存储感兴趣是因为他可从Zetta公司（Sunnyvale的一家云存储服务供应商）那里获得预测价格。 通过与其母公司建立从属关系，Encyclopedia Virginia将主数据存储在弗吉尼亚州大学主数据中心的系统中，但在那里，就如同Hedlund所说“我们只是大河中的一条小鱼”，因此快速加大存储量是很难的，他甚至无法得到大学对存储的确切收费。Zetta公司的报价是每月每GB 25美分，Hedlund 认为“这一价格还算合理”。现在Hedlund不仅能计算出当前所需存储容量，并且可作出精确的预算。 但是，他补充说，“从这一点上来看，我们不该考虑采用Zetta作为主存储。”他认为,对于Encyclopedia Virginia来说，云存储的实际价值就像一个低成本的归档系统，可存储无尽的图像、音频和视频文件。Hedlund问道：“我想知道我们还能有其他地方来存储这些数据吗? ” Cloudize公司是一家提供协作服务的公司，采用来自Nirvanix公司的云存储。这家旧金山的新公司的云存储价格与Encyclopedia Virginia相同每月每GB25美分，Cloudize 公司首席执行官 Edwin Fu说这个价格对于进行计划和预算来说比较理想。而且他也喜欢这一点：Nirvanix支持整个公司的在线存储都是这一价格，而不是基于每个用户收费。 Fu说对于Cloudize而言，Rackspace Hosting这类公司提供的传统服务就成本太高。 我们通过对云计算的早期用户调查评估后发现，使用云服务不仅可以免除企业对存储基础实施的需求，还可以带来更多的好处。问题的关键显然是云存储的价值与在数据中心里购买和管理更多存储设施的对比问题，抛开其他层的总所有成本不考虑，这个事情就变得更加有趣了。本地存储数据的总所有成本不仅仅包含保留磁盘空间的成本，还有其他一些内容。 四、总结本文主要通过对云存储的技术架构和发展趋势两方面的阐述，说明云存储技术在实际运用中成本的降低，主要表现为通过扩大数据访问的便捷性、有效性和数据安全性，进一步明确在信息化高度发展的当今社会，有效的管理和访问数据是世界各国企业所关注的焦点问题，而云储存技术正是适时解决了这个问题，让所有受益群体在繁杂的数据管理工作中有章可循，并且管理成本并不会因为数据量的加大而加大，反而是在互联网发展的基础上集合了多种功能，是企业在一个平台上实现了多种管理功能，从而减少了人力资源和机器损耗等多方面的成本。 云存储技术相对低廉的硬件采购成本及硬件冗余的架构，能在硬件损坏时，自动接管服务，并且不影响服务效能，数据也不会丢失，这样保证了服务的连续性，而节能的设计也对整体存储拥有成本的降低，产生了决定性的影响。开发云存储战略可能会很复杂，而且对安全性要求也很高。但是，从早期用户的使用经验来看，云存储的真正优势在于能为用户节约成本。分析师称采用基于云的服务可以节约IT支出，因为云计算采用共享的基础设施，并将特定成本由资本费用转为运行费用。 9