如何实现云存储系统的“数据去重”？

  相对于国外的云技术，国内目前云计算技术的发展相对落后几年，经历了2010年和2011年快速的发展但目前仍然处于起步阶段。国内涉及云计算领域的企业包括了华为、中兴、阿里巴巴等厂商以及中国电信、中国移动、中国联通三大运营商。

  相关资料显示，2010年，中国云计算市场规模达到559.3亿元人民币，同比增长29.3%。2011年~2015年，云计算仍将是整个ICT市场中最热的概念之一。

  存储领域的特点

  云计算技术的发展带来了数据运用与管理的新方式，突显出合旧资源的整合与合理运用，无限的云计算能力更是完全解决了未来的数据问题。目前业界的云存储主要基于以下三种架构来实现。具体如表所示。

  对象存储、SAN和NAS都属于网络存储系统架构，但根本区别在于NAS有自己的文件管理系统，而SAN没有。而对象存储兼并了两者的优点。从技术实现的角度上，目前存储领域架构主要采用NAS、SAN，而从未来的市场发展来看云存储系统将以对象存储为主。

  存储数据容量变化

  根据IDC的数据，全球的数据产生量仅在2011就达到1.8ZB(或1.8万亿GB)IDC预计，全球数据总量到2020年将增长50倍，全球数据总量将达到35ZB。而到2015年，预计有约20%的数据被存储到云计算所提供的服务中，也因此提高了云基础架构在IT开支的比例。

  另外，全球数据量大约每两年翻一番，意味着在最近的两年内所产生的数据量相当于之前产生的所有数据量。 如图1所示。

  图1 全球数据总量增长图示表

  云存储趋势

  随着网络技术的发展，用户、企业等网络数据存储量迅速增加，具有可靠性、稳定性和可扩展性的海量云存储系统将代替传统的存储方式，成为网络存储系统的新宠儿。传统网络数据存储过于分散，首先，存储空间并不能满足数据线性增长的需求。其次，由于数据的分散管理而导致投资和维护成本增加。再者，大量数据的存取操作导致存储系统和网络支撑效率低下。在这个背景下，业界提出了基于云计算的云存储服务，不仅能够解决IDC大量数据存取及传输的问题，而且也提高数据存储的稳定性、安全性和可靠性，受到企业和用户的青睐。