云计算综述Word文件下载.docx
《云计算综述Word文件下载.docx》由会员分享，可在线阅读，更多相关《云计算综述Word文件下载.docx（23页珍藏版）》请在冰豆网上搜索。
3.2MapReduce实现 12
第四章 浅谈hadoop框架 16
4.1Hadoop简介 16
4.2Hadoop的组成部分 16
第五章PageRank简介 20
5.1PageRank概念 20
5.2pagerank原理 21
5.3PageRank相关算法 22
第一章云计算基础知识
1.1云计算思想的产生
传统模式下，企业建立一套IT系统不仅仅需要购买硬件等基础设施，还有买软件的许可证，需要专门的人员维护。
当企业的规模扩大时还要继续升级各种软硬件设施以满足需要。
对于企业来说，计算机等硬件和软件本身并非他们真正需要的，它们仅仅是完成工作、提供效率的工具而已。
对个人来说，我们想正常使用电脑需要安装许多软件，而许多软件是收费的，对不经常使用该软件的用户来说购买是非常不划算的。
可不可以有这样的服务，能够提供我们需要的所有软件供我们租用？
我们可不可以像使用水和电一样使用计算机资源？
这样我们只需要在用时付少量“租金”即可“租用”到这些软件服务，为我们节省许多购买软硬件的资金。
这些想法最终导致了云计算的产生。
云计算的最终目标是将计算、服务和应用作为一种公共设施提供给公众，使人们能够像使用水、电、煤气和电话那样使用计算机资源。
云计算模式即为电厂集中供电模式。
在云计算模式下，用户的计算机会变的十分简单，或许不大的内存、不需要硬盘和各种应用软件，就可以满足我们的需求，因为用户的计算机除了通过浏览器给“云”发送指令和接受数据外基本上什么都不用做便可以使用云服务提供商的计算资源、存储空间和各种应用软件。
在云计算环境下，用户的使用观念也会发生彻底的变化：
从“购买产品”到“购买服务”转变，因为他们直接面对的将不再是复杂的硬件和软件，而是最终的服务。
用户不需要拥有看得见、摸得着的硬件设施，也不需要为机房支付设备供电、空调制冷、专人维护等等费用，并且不需要等待漫长的供货周期、项目实施等冗长的时间，只需要把钱汇给云计算服务提供商，我们将会马上得到需要的服务。
1.2云计算的概念
云计算（CloudComputing）是由分布式计算（DistributedComputing）、并行处理（ParallelComputing）、网格计算（GridComputing）发展来的，是一种新兴的商业计算模型。
目前，对于云计算的认识在不断的发展变化，云计算没仍没有普遍一致的定义。
中国网格计算、云计算专家刘鹏给出如下定义：
“云计算将计算任务分布在大量计算机构成的资源池上，使各种应用系统能够根据需要获取计算力、存储空间和各种软件服务”。
狭义的云计算指的是厂商通过分布式计算和虚拟化技术搭建数据中心或超级计算机，以免费或按需租用方式向技术开发者或者企业客户提供数据存储、分析以及科学计算等服务，比如亚马逊数据仓库出租生意。
广义的云计算指厂商通过建立网络服务器集群，向各种不同类型客户提供在线软件服务、硬件租借、数据存储、计算分析等不同类型的服务。
广义的云计算包括了更多的厂商和服务类型，例如国内用友、金蝶等管理软件厂商推出的在线财务软件，谷歌发布的Google应用程序套装等。
通俗的理解是，云计算的“云“就是存在于互联网上的服务器集群上的资源，它包括硬件资源（服务器、存储器、CPU等）和软件资源（如应用软件、集成开发环境等），本地计算机只需要通过互联网发送一个需求信息，远端就会有成千上万的计算机为你提供需要的资源并将结果返回到本地计算机，这样，本地计算机几乎不需要做什么，所有的处理都在云计算提供商所提供的计算机群来完成。
1.3云计算的服务模式
云计算还处于萌芽阶段，有庞杂的各类厂商在开发不同的云计算服务。
云计算的表现形式多种多样，简单的云计算在人们日常网络应用中随处可见，比如GoogleDoc,
Google
Apps等。
目前，云计算的主要服务模式有：
SaaS，PaaS和IaaS。
（1）软件即服务（SaaS）
SaaS服务提供商将应用软件统一部署在自己的服务器上，用户根据需求通过互联网向厂商订购应用软件服务，服务提供商根据客户所定软件的数量、时间的长短等因素收费，并且通过浏览器向客户提供软件的模式。
这种服务模式的优势是，由服务提供商维护和管理软件、提供软件运行的硬件设施，用户只需拥有能够接入互联网的终端，即可随时随地使用软件。
这种模式下，客户不再像传统模式那样花费大量资金在硬件、软件、维护人员，只需要支出一定的租赁服务费用，通过互联网就可以享受到相应的硬件、软件和维护服务，这是网络应用最具效益的营运模式。
对于小型企业来说，SaaS是采用先进技术的最好途径。
以企业管理软件来说，SaaS模式的云计算ERP可以让客户根据并发用户数量、所用功能多少、数据存储容量、使用时间长短等因素不同组合按需支付服务费用，既不用支付软件许可费用，也不需要支付采购服务器等硬件设备费用，也不需要支付购买操作系统、数据库等平台软件费用，也不用承担软件项目定制、开发、实施费用，也不需要承担IT维护部门开支费用，实际上云计算ERP正是继承了开源ERP免许可费用只收服务费用的最重要特征，是突出服务的ERP产品。
目前S是提供这类服务最有名的公司，Google
Doc,
Apps和Zoho
Office也属于这类服务。
（2）平台即服务（PaaS）
把开发环境作为一种服务来提供。
这是一种分布式平台服务，厂商提供开发环境、服务器平台、硬件资源等服务给客户，用户在其平台基础上定制开发自己的应用程序并通过其服务器和互联网传递给其他客户。
PaaS能够给企业或个人提供研发的中间件平台，提供应用程序开发、数据库、应用服务器、试验、托管及应用服务。
App
Engine,
Salesforce的平台，八百客的800APP是PaaS的代表产品。
以Google
Engine为例，它是一个由python应用服务器群、BigTable数据库及GFS组成的平台，为开发者提供一体化主机服务器及可自动升级的在线应用服务。
用户编写应用程序并在Google的基础架构上运行就可以为互联网用户提供服务，Google提供应用运行及维护所需要的平台资源。
（3）基础设施服务（IaaS）
IaaS即把厂商的由多台服务器组成的“云端”基础设施，作为计量服务提供给客户。
它将内存、I/O设备、存储和计算能力整合成一个虚拟的资源池为整个业界提供所需要的存储资源和虚拟化服务器等服务。
这是一种托管型硬件方式，用户付费使用厂商的硬件设施。
例如Amazon
Web服务（AWS），
IBM的BlueCloud等均是将基础设施作为服务出租。
IaaS的优点是用户只需低成本硬件，按需租用相应计算能力和存储能力，大大降低了用户在硬件上的开销。
目前，以Google云应用最具代表性，例如GoogleDocs、GoogleApps、GoogleSites，云计算应用平台GoogleApp
Engine。
无论哪种模式，都需要建立在底层云计算基础设施（资源池）的基础之上。
1.4云计算的产业现状
云计算的发展一方面是市场的推动，从基础设施提供商，平台服务提供商到云计算应用提供商，众多的公司参与其中；
另一方面则是各国政府的大力支持。
1、各国政府积极推进云计算
（1）美国
2009年9月，美国联邦CIO委员会宣布了联邦政府的云计算发展计划。
美国联邦云计算发展计划分为3个要点：
开通联邦apps.gov官方网站，整合商业、社交媒体与云端IT服务；
建立联邦云计算的示范工程，资助众多试点项目，包括中央认证、目标架构与安全、隐私以及采购相关内容；
联邦大规模采购云计算服务
（2）日本
日本内务部和通信监管机构计划建立一个名为“KasumigasekiCloud”大规模的云计算基础设施，以支持所有政府运作所需的信息系统。
该机场设施建设计划将在2015年完工，目标是将政府的所有IT系统到一个单一的云基础设施，从而提高运营效率和降低成本。
（3）韩国
韩国广播通信委员会、知识经济部、行政安全部去年公布了《搞活云计算综合计划》。
计划在2014年之前向云计算（CloudComputing）领域投资6146亿韩元（36亿人民币），争取使韩国云计算市场的规模扩大为目前的四倍，达到2.5万亿韩元。
同时还树立了将韩国相关企业的全球市场占有率提高至10%的目标。
（4）英国
英国由政府CIO发布了数字英国报告，呼吁政府部门建立统一的政府云G-Cloud，从云计算的易扩展、快速提供和灵活定价的好处中受益。
2、国际IT巨头引领云计算产业
云计算的技术和商业前景已使资金、人才与创新更加聚集。
公开宣布进入或支持云计算技术开发的业界巨头包括微软、谷歌、IBM、Amazon、Netsuite、NetApp、Adobe等，几乎涉及所有的一线IT企业。
各公司依据自己传统的技术领域和市场策略都提出了自己的云计算架构，从各个方向进军云计算。
企业
技术特性
核心技术
企业服务
开源程度
微软
整合其所用软件及数据服务
大型应用软件开发技术
Azure平台
不开源
Google
储存及运算水平扩充能力
MapReduce，BigTable，GFS
GoogleApp；
Engine，应用代管服务
IBM
整合其所有软件及硬件服务
网格技术，分布式存储，动态负载
虚拟资源池提供，企业云计算整合方案
Oracle
软硬件弹性虚拟平台
Orackle的数据存储技术，Sun开源技术
EC2上的Oracle数据库，OracleVM，SunxVM
部分开源（Sun）
Amazon
弹性虚拟平台
虚拟化技术Xen
EC2、S3，SimpleDB、SQS，
开源
Saleforce
弹性可定制商务软件
应用平台整合技术
F
EMC
信息存储系统及虚拟化技术
Vmware的虚拟化技术，一流存储技术
Atoms云存储系统，私有云解决方案
3、我国现状
我国的云计算产业由于技术储备不足，相关人才不够成熟，市场也有待培育，目前还处于学术层面的研究以及试商用层面，云计算业务的大规模部署尚需时日。
但政府及产业界等方面对云计算都表现出极大的热情，从不同的角度对云计算的技术研究、业务部署和产业推进给予支持。
–各地政府支持云平台建设
北京市计算中心与Platform软件公司共建联合实验室，推进“北京云”的建设。
该公共云计算平台定位于工业计算，以IaaS和SaaS两种方式，为政府单位和广大中小企业提供最新的硬件和软件设施、虚拟原型制作、可视化技术、网络技术、数据挖掘等，增强工业企业的产品研发能力。
随着黄河三角洲逐步上升为国家开发战略，山东省东营市政府与IBM一起筹建黄河三角洲云计算中心，主要建设内容包括：
云计算基础资源平台、软件公共技术及测试管理服务平台、外包人才实训平台和企业创新服务平台等，未来还可提供电子政务、数字化城市、公共医疗、企业OA服务等应用服务。
广东东莞和佛山以政府为主导搭建本地化的公益性云计算平台。
东莞松山湖的项目是国内首个具有自主产权的云计算平台，有意向使用该平台的企业就有三千多家，该平台建成后预计年产出将达到18亿元至30亿元。
江苏省无锡市联手IBM创建了世界第一个商业云计算中心，在无锡
升级会员 