云存储.docx
《云存储.docx》由会员分享，可在线阅读，更多相关《云存储.docx（9页珍藏版）》请在冰豆网上搜索。
云存储
云存储技术的到来你准备好了吗
来源:
It专家网 我要评论（0）
∙摘要：
减少高昂的成本费用和对高容量、高安全性存储设施的需求是预计云存储技术服务将在未来保持持续的高速增长的一个主要原因。
为此谷歌，亚马逊，李开复......
∙标签：
云存储技术
∙
对于国内存储服务运营商而言，最大的挑战来自于安全性和信任，一方面，需要依赖于更为强大的加密技术和安全技术的支持，另一方面，在更为庞大的免费存储市场上，则需要良好的运作信誉及速度。
许多的企业纷纷将目光转移到云储存。
谷歌，亚马逊，乃至百万中国大学生心目中的精神导师李开复博士，在自己成立创业项目时宣称，创新工场将立足信息产业最热门领域如：
云计算等，选择相关技术作为创业起点。
那么云储存是什么呢？
云存储在云计算（cloudcomputing）概念上延伸和发展出来的一个新的概念。
与云计算类似，它是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。
对于普通使用者来讲，云存储并不是一个具体的设备，而是使用整个云存储技术系统获得的数据访问服务。
云存储——崭新的存储市场
减少高昂的成本费用和对高容量、高安全性存储设施的需求是预计云存储技术服务将在未来保持持续的高速增长的一个主要原因。
在这个市场上，许多其他厂商推出了新的创新服务。
我们已经看到一些基于云存储技术的民用解决方案，这些解决方案将同时给中小型企业和大型企业带来云存储技术的经济性，同时它们还将用创新的方式来桥接本地存储与远程存储。
这些解决方案可以克服远程存储的劣势，并带来一系列独一无二的数据功能。
Amazon在两年前就推出的ElasticComputeCloud（EC2：
弹性计算云）云存储技术产品，旨在为用户提供互联网服务形式同时提供更强的存储和计算功能。
半年以前，微软就已经推出了提供网络移动硬盘服务的WindowsLiveSkyDrive。
IBM也将云计算标准作为全球备份中心的3亿美元扩展方案的一部分。
在中国，也有不少技术型企业也推出了基于云存储技术，构建在高速分布式网络存储方案——如数据银行DbankCloudStorageService，该产品主要是采用特有的文件系统来保存多个类型的数据，包括动态文件归档、私人目录、数据迁移、用于在线分发的媒体存储和数据仓库扩展，主要服务与对安全性和稳定性有较高要求的商务人群。
但是目前，像纳米、rayfile、联想等分享性质的网盘存储产品目前则似乎占据了更多的市场份额
浅析云存储的Block与File及应用
你知道云存储技术有哪些种类吗？
你清楚云存储的适用范围吗？
本文将逐一为你揭开这些谜底。
云存储技术是为解决传统存储无法解决的问题而产生的，并不是要完全取代传统的存储。
存储方案的选择，要根据数据的形态、数据量及数据读写的方式来做规划。
每个存储方案都有它的优点与缺点。
云存储的种类及适合的应用
我们可以把云存储分成二类，BlockStorage与FileStorage。
BlockStorage会把单笔的数据写到不同的硬盘，借以得到较大的单笔读写带宽，适合用在数据库或是需要单笔数据快速读写的应用。
它的优点是对单笔数据读写很快，缺点是成本较高，并且无法解决真正海量文件的储存，像EqualLogic3PAR的产品属于这一类。
FileStorage是基于文件级别的存储，它是把一个文件放在一个硬盘上，即使文件太大拆分时，也放在同一个硬盘上。
它的缺点是对单一文件的读写会受到单一硬盘效能的限制，优点是对一个多文件、多人使用的系统，总带宽可以随着存储节点的增加而扩展，它的架构可以无限制的扩容，并且成本低廉，代表的厂商如Parascale。
那些应用适合BlockStorage？
快速更改的单一文件系统
快速更改单一文件的例子包括数据库、共用的电子表单，在这些例子中，好几个人共享一个文件，文件经常性地、频繁的更改。
为了达到这样的目的，系统必须具备很大的内存、很快的硬盘及快照等功能，市场上有很多这样的产品可以选择。
针对单一文件大量写的高性能计算（HPC）
某些高性能计算有成千上百个使用端，同时读写单一个文件，为了提高读写效能，这些文件被分布到很多个节点，这些节点需要紧密地协作，才能保证数据的完整性，这些应用由集群软件负责处理复杂的数据传输。
例如石油探勘及财务数据模拟。
哪些应用适合FileStorage？
FileStorage适合应用的场合如下
1．文件较大，总读取带宽要求较高—例如网站、IPTV
2．多个文件同时写入–例如监控
3．长时间存放的文件–例如文件备份、存放或搜寻
这些应用有一些共通的特性
1．文件的并发读取
2．文件及文件系统本身较大
3．文件使用期较长
4．对成本控制要求较高
下面我们介绍一下典型的FileStorage应用
文件及内容搜寻
大部分的情形，数据久了之后，使用的机会就比较少，但为了可以查询，不管是公司资料还是媒体内容，查询的成本必须低于数据本身的价值，这样才划得来。
用户可以使用旧的甚至淘汰不用的服务器建立云存储，存放这些旧的数据以供查询。
Tier-2NAS
FileStorage支持标准的网络协议，对使用者来说，就是一个NAS，用户在使用时，几乎不需更动数据中心任何的应用端程序，一些旧的数据，可以迁移到这个云存储中，我们可以把它作为Tier-2的NAS来使用。
Tier-2是指二级存储的意思。
多文件大量写入的应用
监控是大量数据写入的典型应用，成千上万的摄像头，将数据写到各自的文件中，在一个云存储技术中，有很多存储节点，每个存储节点可以提供多个摄像头写入，在写的带宽不够时，只要增加存储节点即可，由于数据集中处理，只需要一个管理人员，便能管理整个监控系统。
数据大量读取的应用
数据挖掘及高性能计算是大量读取的标准应用，这些应用需要很大的读取带宽，这些带宽的要求往往不是现有一般的NAS可以提供的，云存储技术可以把很多文件分散写到不同的存储节点，以便透过多个存储节点的并发得到最大的带宽。
这里的高性能计算与BlockStorage中说的不同点是，这里的高性能计算所读取的不是单一文件，而是从不同存储节点读取很多文件，这是FileStorage的强项。
多个使用端都希望读取同一个文件的应用
IPTV及网站的特质是，一个文件同时供很多人读取，为了应付大量及突如其来的读取需求，云存储会复制多份文件，以满足应用端读取的需求。
结论
以上我简单了介绍云存储的种类及适合的应用，有机会我再仔细介绍每一个应用。
总之云存储技术是希望借由服务器便宜的成本及弹性的架构，解决传统存储不能满足的问题，客户可以根据数据的形态，选择合适的存储方案。
简析云存储技术两种架构
云存储技术的概念始于Amazon提供的一项服务（S3），同时还伴随着其云计算产品（EC2）。
在Amazon的S3的服务背后，它还管理着多个商品硬件设备，并捆绑着相应的软件，用于创建一个存储池。
新兴的网络公司已经接受了这种产品，并提出了云存储这个术语及其相应的概念。
云存储是一种架构，而不是一种服务。
你是否拥有或租赁了这种架构是一个次要问题。
从根本上来看，通过添加标准硬件和共享标准网络（公共互联网或私有的企业内部网）的访问，云存储技术很容易扩展云容量和性能。
事实证明，管理数百台服务器，使得其感觉上去就像是一个单一的、大型的存储池设备是一项相当具有挑战性的工作。
早期的供应商（如Amazon）承担了这一重任，并通过在线出租的形式来赢利。
其它供应商（如Google）雇用了大量的工程师在其防火墙内部来实施这种管理，并且定制存储节点以在其上运行应用程序。
由于摩尔定律（Moore’sLaw）压低了磁盘和CPU的商品价格，云存储渐渐成为了数据中心中一项具有高度突破性的技术。
这十年来，集群NAS系统已经出现了好转。
本文综述了构建一个云存储或大规模可扩展的NAS系统的各种不同架构方法，对于那些寻求构建私有云存储以满足其消费的企业IT管理者或是对于那些寻求构建公共云存储产品从而以服务的形式来提供存储的服务提供商来说，这些方法与他们息息相关。
架构方法分为两类：
一种是通过服务来架构;另一种是通过软件或硬件设备来架构。
传统的系统利用紧耦合对称架构，这种架构的设计旨在解决HPC（高性能计算、超级运算）问题，现在其正在向外扩展成为云存储从而满足快速呈现的市场需求。
下一代架构已经采用了松弛耦合非对称架构，集中元数据和控制操作，这种架构并不非常适合高性能HPC，但是这种设计旨在解决云部署的大容量存储需求。
各种架构的摘要信息如下：
紧耦合对称（TCS）架构：
构建TCS系统是为了解决单一文件性能所面临的挑战，这种挑战限制了传统NAS系统的发展。
HPC系统所具有的优势迅速压倒了存储，因为它们需要的单一文件I/O操作要比单一设备的I/O操作多得多。
业内对此的回应是创建利用TCS架构的产品，很多节点同时伴随着分布式锁管理（锁定文件不同部分的写操作）和缓存一致性功能。
这种解决方案对于单文件吞吐量问题很有效，几个不同行业的很多HPC客户已经采用了这种解决方案。
这种解决方案很先进，需要一定程度的技术经验才能安装和使用。
松弛耦合非对称（LCA）架构：
LCA系统采用不同的方法来向外扩展。
它不是通过执行某个策略来使每个节点知道每个行动所执行的操作，而是利用一个数据路径之外的中央元数据控制服务器。
集中控制提供了很多好处，允许进行新层次的扩展：
·存储节点可以将重点放在提供读写服务的要求上，而不需要来自网络节点的确认信息。
·节点可以利用不同的商品硬件CPU和存储配置，而且仍然在云存储中发挥作用。
·用户可以通过利用硬件性能或虚拟化实例来调整云存储。
·消除节点之间共享的大量状态开销也可以消除用户计算机互联的需要，如光纤通道或infiniband，从而进一步降低成本。
·异构硬件的混合和匹配使用户能够在需要的时候在当前经济规模的基础上扩大存储，同时还能提供永久的数据可用性。
·拥有集中元数据意味着，存储节点可以旋转地进行深层次应用程序归档，而且在控制节点上，元数据经常都是可用的。
云存储技术选择
虽然在可扩展的NAS平台上有很多选择，但是通常来说，他们表现为一种服务、一种硬件设备或一种软件解决方案，每一种选择都有它们自身的优势和劣势：
·服务模式：
最普遍的情况下，当你考虑云存储的时候，你就会想到其所提供的服务产品。
这种模式很容易开始，其可扩展性几乎是瞬间的。
根据定义，你拥有一份异地数据的备份。
然而，带宽是有限的，因此要考虑你的恢复模型。
你必须要满足你网络之外的数据的需求。
·HW模式：
这种部署位于防火墙背后，并且其提供的吞吐量要比公共的内部网络好。
购买整合的硬件存储解决方案非常方便，而且，如果厂商在安装/管理上做的好的话，其往往伴随有机架和堆栈模型。
但是，这样你就会放弃某些摩尔定律的优势，因为你会受到硬件设备的限制。
·SW模式：
SW模式具有HW模式所具有的优势。
另外，它还具有HW所没有的价格竞争优势。
然而，其安装/管理过程序要谨慎关注，因为安装某些SW的确非常困难，或者可能需要其他条件来限制人们选择HW，而选择SW。
伴随着大规模的数字化数据时代的到来，在这个时代里，企业使用YouTube来分发培训录像，在这里，没有必要将这些数字“资料”放的到处都是。
像以上这些企业正致力于内容的创建和分布，基因组研究、医学影像等的要求会更加严格准确。
LCS架构的云存储非常适合这种类型的工作负载，而且还提供了巨大的成本、性能和管理优势。
发展云存储技术需要面临的问题
数据增长的数据管理问题不能总是靠单纯地加大存储容量来解决，在这种持续压力下，云存储技术来到我们身边，成为了新的选择。
目前而言，国外不少的企业（例如英国）都有着大的互联网宽带，这就给予了企业用户将主要数据迁移至云的途径以作备份或者还原之用。
通过缴纳一定的云存储服务月费来避免不菲的相关存储服务的自运营费用，IT经理们似乎看见了一线曙光。
云存储，即所谓的存储即服务（SaaS，storage-as-a-service）也不是什么新概念了。
细想一下，信贷紧缩、数据增长以及优良的互联网宽带为IT经理们勾画出一副新的数据存储的蓝图，那么，这是一个具备竞争力的方案吗？
云存储技术起源
尽管云存储源自消费者市场，但是近期越来越多的服务商在向各种企业用户推出包括存储在内的云计算服务。
IDC近期将兴起的云存储行业比作是"圈地运动"并且将其视作早期竞争对手抢占SaaS和云存储市场高地的机会。
任何一项新技术的转变都有其固有的风险，云存储也不例外。
初始阶段，云存储面临着过多可能的国际监管障碍，从公司管理到国家性的数据安全因素。
这其中还涉及到高度分裂的，充满机遇的市场，而这里却鲜有国家认可的标准或SLA。
从任意源头（包括云）备份和还原数据需要弹性、可靠性以及持续可用性。
凭借着互联网连通性和宽带，云存储技术依旧需要在该领域得到更多证明。
宽带瓶颈和安全性、可用性的顾虑
考虑到过去20年中，宽带提升和数据增长的差距更为恶化，宽带很有可能是阻碍云存储被当做标准商业化应用普及的最大障碍。
对于典型的个人消费者而言，互联网宽带从28.8kmodem提升至5Mbps左右，提升幅度超过170倍。
但是与此同时数据增长却从先前的大约每个用户平均100MB暴增至超过1TB，其增幅竟然超过1万倍。
随着这种差距的逐渐扩大，装置外存储（offsitestorage）作为主要数据存储途径的可行性越来越小。
除宽带之外，其他限制性因素包括可靠性和安全性也在议事日程上不可忽视。
将数据迁移至云中致使企业用户在数据安全性和可用性方面高度受制于其云存储服务器供应商。
让众多企业将其数据迁移至云中非常艰难。
可以说安全性和可用性的担忧是企业走向云存储模式的至高无上的因素。
一旦上述问题得以解决，云存储也就适应了商业化信息存储库的需要。
初始的备份可以在装置内完成，也可以在云存储上另作备份获得装置外的数据保护。
考虑到只有新增的数据才会被迁移至云中，因此支持自动化增量备份的技术最为适宜。
自动化增量备份将提供了一个高效战略，增量备份在降低宽带压力的同时自动化特性也节省了雇员进行日常相关操作的时间。
很显然云带来了前所未有的机遇，而这机遇最好千万不要被商业化应用所轻视。
IT经理既要高度熟悉其云存储提供商的政策和方法也要深刻了解最糟糕情况下的后果。
正如他们所言每种云技术都是一线希望。
而对于云存储而言，一旦踏平前方路上的荆棘，云存储成功被商业化应用顶将成为现实。
寻找云存储技术应用突破口
“现在，我们正处在一个重大的变革期，整个IT界正在从以设备/应用程序为中心转向以信息为中心，而这一转变还将引发一系列的变革，并影响到技术和业务模式两个层面。
”在EMC中国研发中心举办的首个“创新日”上，EMC中国研发中心总架构师任翔宇表示。
任翔宇认为，云存储技术的最大特点是海量、高性能/高访问量以及低成本，而其带来的最大变革是，提供商逐渐从销售工具转向根据工具的实际使用收费，也就是从卖产品转向了卖服务。
云存储的业务模式有很多种，广告收费模式是其中的一种，这种模式已经被谷歌、XX等证明了是非常有效的商业模式。
此外，其他的商业模式也可能会应用于云计算中，比如电信或电力公司的按流量和用量收费，这种计费模式也是被广泛采用的一种商业模式。
任翔宇表示，除了这两种商业模式外，EMC还将提供第三种商业模式，那就是提供云计算中的交换信息平台，使第三方软件提供商和服务提供商能够在EMC的云计算平台中为用户提供管理信息的服务，而EMC作为一个平台提供商可以得到附加价值。
当然，云存储在技术上以及未来的发展中还面临着很大的挑战，比如安全性、可信计算、高访问量以及大规模等。
EMC将自己研究“云计算环境中的行为规范”的项目命名为“道里”，也正是因为在云计算中遵守行为规范就像路上的车辆或行人必须在自己的“道里”行进一样。
面对云存储技术未来的发展，任翔宇表示，云计算在国内推广的过程中可能还会遇到的难题包括:
在技术上，数据中心的位置，并要支持不仅限于Windows的操作系统;在业务上，定价模式是提前购买还是订用，以及合作伙伴的关系架构;在法律上，加密算法、数据保密等;在文化和行为方式上，本地化、本地语言支持、对在云中存储信息的接受度，这些都是未来要面对的难题。
此前，EMC就发布了首款云存储基础架构产品Atmos，并定义了一个新的市场类别，即云优化存储。
事实上，近期包括UIT、华赛等厂商也相继推出了一些云存储产品，但这些产品是否能被市场认可，并能真正做到云存储，目前还是未知数，毕竟云存储的发展从观念到技术都需要一个过程。
对此，任翔宇也表示，EMC的云优化存储着眼于2009年以及未来。
不过，倒是以个人用户为主的云存储已经有了成功的案例，有望成为云存储技术的突破口。
EMC分别收购了两家与个人信息服务有关的公司，一家是个人信息管理公司Pi，一家是提供在线备份服务的公司Mozy，日前，EMC将Pi和Mozy合并成立了新的公司Decho，专注于个人或小企业的云服务。
据介绍，在美国，用户可以将自己的数据备份到Mozy，2GB以内是免费的，如果每月花费5美元，就可获得无限制的个人备份空间，同时还提供基于计算机台数和GB数的订制服务模式。
曾经有这样一个小故事，有一位Mozy用户的笔记本电脑被小偷偷走了，该用户数天后在郁闷之余突然想起，尽管笔记本电脑丢失了，但其中的所有信息已经备份到了Mozy，可以到Mozy找回信息。
于是他登录到Mozy的账户，突然发现小偷的电话单等个人信息也赫然在上，原来小偷并不知道这台电脑是Mozy的用户，当他继续使用时，殊不知他的信息也自动备份到了Mozy，根据这一线索，小偷最终没能逃脱
云存储广泛应用的四大领域
备份、归档、分配和共享协作这四个就是云存储广泛应用的领域。
当然随着云存储技术的进一步革新，云存储所涉及的领域也就越来越广泛。
备份
备份应用逐渐向消费者模式以及Mozy或者Carbonite等企业的产销模式以外的领域扩展，进入中小型企业市场。
最为普遍的应用方案是使用混合存储，将最常用的数据保存在本地磁盘，然后将它们复制到云之中。
归档
归档最终会成为企业使用云容量的最佳方案。
对于云来说，这是一个完美的云存储广泛应用的领域，将旧数据从自己的设备迁移到别人的设备中。
这种数据移动是安全的，可进行端对端加密，而且许多供应商甚至都不会保存密钥，这样它们就是象看你的资料也看无法看到。
混合模式在这个领域的应用也很普遍。
你可以将旧资料备份到一个看似底部NFS或CIFS安装点的设备中。
这个领域的产品或服务供应商包括Nirvanix、Bycast和IronMountain等。
在归档应用中，还需调整这类产品中的应用程序接口配置。
例如，我想给归档的项目上挂上具体元数据标签。
最好还能在开始归档之前标明保留时间和删除冗余数据。
云归档的位置将取决于提供云归档服务的服务商。
分配
至于分配与协作，似乎要属于服务供应商提供的范畴。
它们一般会使用上述供应商如Nirvanix、Bycast、Mezeo、Parscale提供的云基础设施产品或者EMCAtmos或Cleversafe等厂商的系统类产品。
如果想使用更传统的归档产品或服务，可以考虑Permabit或者Nexsan等可调存储厂商的产品和服务。
服务供应商们将利用这些基础设施。
我们会发现这个领域开始分化。
B已经采用了一种Facebook类型的模式来协作，Soonr则调整了备份功能以便自动将你的数据移动到云之中，然后你可以根据情况分享或传输那些内容。
Dropbox和SpiderOak已经开发出功能非常强大的多平台备份和同步软件。
共享协作
在共享应用上，文件状态的检查还需进一步完善。
我想知道文件的实时使用情况。
在传输方面，我想知道谁在传输文件，他们看了多长时间以及他们在阅览文件过程中在哪些地方做了评论或提出了问题。
至此，本文就列举了云存储广泛应用的四大领域，要想了解的更多相关报道，请留意站上的更新的相关帖子.
早期用户对云存储技术的评价
ASCAP的许可证分部副总JohnJohnson说企业过去希望采用S公司的托管服务以管理和存储数字文档，但其可提供的存储量很小。
然而，通过采用来自加利福尼亚州Appirio公司的服务，他当前可以采用S来管理存储在S3中的文档。
这使得ASCAP的人员成本节约了几千美元，因为过去的方式需要人工搜寻文件以找到合同。
开发云存储战略过程复杂，而对安全性也要求过高。
但据早期采用者的介绍，云存储技术的唯一益处在于成本的节约。
分析师称采用基于云的服务可节约IT资金，因为云计算包括采用分享的基础设施，并将特定成本由资本费用转成运行费用。
竞争使成本降低，特别是对于大型企业用户。
比如，当每月用量超过50TB时，Amazon将存储价格由15美分每十亿字节每月降低到12美分每十亿字节每月。
在六月，其将数据转移成本降低到3美分每十亿字节。
一个早期用户PeterHedlund（EncyclopediaVirginia的一个程序员）说，他对于云存储技术感兴趣是因为：
他可从Zetta公司（Sunnyvale一家云存储服务供应商）处获得预测价格。
通过与其母企业建立从属关系，Virginia人文科学基金会，EncyclopediaVirginia将主数据存储在维吉尼亚州大学主数据中心的系统中，Hedlund说，“我们只是大河中的一条小鱼。
”快速加大存储量是很难的，他甚至无法得到大学对存储量的确切收费。
Hedlund说，Zetta的定价结构是每月每十亿字节25美分，这一定价还算合理。
我们注意到，现在他不仅能计算当前所需容量，并且可作出精确的预算。
然而，他补充说，“从这一点上来看，我们不该考虑采用Zetta作为主存储。
”他说，“云存储的实际价值对于EncyclopediaVirginia来说，正如一个低成本的归档系统，可存储无尽的图片、音频和视频文件。
我们还能有其他地方来存储这些数据吗?
”
Cloudize公司是一家协作服务公司，采用来自Nirvanix公司的云存储技术。
这家旧金山的新公司的云存储价格与EncyclopediaVirginia相同——每月25美分每十亿字节，CloudizeCEOEdwinFu说这是进
行计划和预算的理想模型。
但是他也喜欢这一现实：
Nirvanix支持整个公司在线存储应用的都是这一价格，而不是基于每个用户收取费用。
Fu说对于Cloudize，来自例如RackspaceHosting此类公司的传统服务成本太高。
构建私人云，让数据离自家近点
SonyPicturesImageworks公司的高级软件工程师NickBali正深入调查采用ParaScale公司软件来构建一个私人云应用软件的可能性。
他的计划是创建可控制产品环境的结构，这一环境中的一个产品至少需要3000台服务器来运行50TB到100TB的数据。
Bali说，由于响应时间的原因，无法将数据放置在公共云中，而云技术（特别是低成本部件、虚拟化、以及扩容的简化或按需付款的资源协议）使构建私人云这一方式很适合Sony公司。
据CIOJoyGrosser所说，另一用户：
爱荷华医疗系统（IowaHealthSystem），在一个私人云上存储了“任务导向”的图片数据，由来自Bycast的软件进行管理。
她说，超过10000的用户在试图将文件从通过私人网络连接到云存储系统。
这一技术选择很好。
但令人目眩的云存储阵列选择和
升级会员 