云计算相关及计划书

《云计算相关及计划书》由会员分享，可在线阅读，更多相关《云计算相关及计划书（37页珍藏版）》请在金锄头文库上搜索。

1、项目的背景，相当于前言，你们为什么对项目感兴趣当今世界， 在经济全球化不断发展的同时，气候变化、能源安全、 粮食安全等全球性问题更加突出， 以知识技术密集、 绿色低碳增长为主要特征的新兴产业蓬勃兴起， 日益成为引领新一轮产业革命的主导力量。 为应对新挑战、 构建新优势， 世界主要国家紧紧抓住新兴产业发展机遇，竞相出台发展战略，加大政府扶持力度，抢占经济科技发展制高点。从 2009 年起，各国都在加快部署、纷纷出台战略规划和相关政策措施、积极推动云计算产业发展和应用，以期在全球经济与竞争格局深刻变革之中占据最大优势。21 世纪10 年代云计算作为一个新的技术趋势已经得到了快速的发展。云计算已经彻

2、底改变了一个前所未有的工作方式，也改变了传统软件工程企业。2014中国国际云计算技术和应用展览会3 月4 日在北京开幕，工信部软件服务业司司长陈伟在会上透露，云计算综合标准化技术体系已形成草案。近期 18 大会议在未来的十三五计划中明确提出重点发展云存储和云计算，物联网等新兴技术。互联网的飞速发展，网络信息的爆炸式增长，现实世界中企业对数据的处理，人们对数据的需求发生了巨大的变化。随着互联网信息量以几何倍增长的今天，普通的计算机信息处理和计算方式已经越来越不能满足现代企业及机构对信息的处理和分析要求，同时人门的生活方式也发生了很大的变化，云计算云存储等能满足未来需求的新技术必然成为应用和探索的

3、热点。因此我们组决定以云计算等作为本学期学习的重点，完成云计算云存储等实践项目。相关技术及原理或技术的特点云计算是一种将可伸缩、弹性、共享的物理和虚拟资源池以按需自服务的方式供应和管理， 并提供网络访问的模式。 云计算模式由关键特征、 云计算角色和活动、云能力类型和云服务分类、云部署模型、云计算共同关注点组成。云计算是一种以数据和处理能力为中心的密集型计算模式，它融合了多项ICT 技术，是传统技术 “平滑演进 ”的产物。其中以虚拟化技术、分布式数据存储技术、编程模型、大规模数据管理技术、分布式资源管理、信息安全、云计算平台管理技术、绿色节能技术最为关键。1、虚拟化技术虚拟化是云计算最重要的核心

4、技术之一， 它为云计算服务提供基础架构层面的支撑，是 ICT 服务快速走向云计算的最主要驱动 力。可以说，没有虚拟化技术也就没有云计算服务的落地与成功。 随着云计算应用的持续升温， 业内对虚拟化技术的重视也提到了一个新的高度。与此同时，我们的 调查发现，很多人对云计算和虚拟化的认识都存在误区， 认为云计算就是虚拟化。 事实上并非如此， 虚拟化是云计算的重要组成部分但不是全部。从技术上讲，虚拟化是一种在软件中仿真计算机硬件，以虚拟资源为用户提供服务的计算形式。旨在合理调配计算机资源，使其 更高效地提供服务。它把应用系统各硬件间的物理划分打破， 从而实现架构的动态化， 实现物理资源的集中管精选文库

5、理和使用。虚拟化的最大好处是增强系统的弹性和灵活 性，降低成本、改进服务、提高资源利用效率。从表现形式上看， 虚拟化又分两种应用模式。 一是将一台性能强大的服务器虚拟成多个独立的小服务器，服务不同的用户。二是 将多个服务器虚拟成一个强大的服务器，完成特定的功能。这两种模式的核心都是统一管理，动态分配资源，提高资源利用率。在云计算中，这两种模式都有比较多的应用。2、分布式数据存储技术云计算的另一大优势就是能够快速、高效地处理海量数据。在数据爆炸的今天，这一点至关重要。为了保证数据的高可靠性， 云计算通常会采用分布式存储技术，将数据存储在不同的物理设备中。 这种模式不仅摆脱了硬件设备的限制， 同时

6、扩展性更好，能够快速响应用户需求的变化。分布式存储与传统的网络存储并不完全一样，传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性 能的瓶颈，不能满足大规模存储应用的需要。 分布式网络存储系统采用可扩展的系统结构， 利用多台存储服务器分担存储负荷， 利用位置服务器定位存储信息， 它不 但提高了系统的可靠性、可用性和存取效率，还易于扩展。在当前的云计算领域， Google 的 GFS和 Hadoop开发的开源系统 HDFS是比较流行的两种云计算分布式存储系统。GFS（ Google File System ）技术：谷歌的非开源的 GFS（GoogleFile System

7、）云计算平台满足大量用户的需求， 并行地为大量用户提供服务。 使得云计算的数据存储技术具有了高吞吐率和高传输率的特点。HDFS（Hadoop Distributed File System）技术：大部分 ICT 厂商，包括 Yahoo、 Intel 的“云”计划采用的都是 HDFS的数据存储技术。未来的发展将集中在超大规模的数据存 储、数据加密和安全性保证、以及继续提高 I/O 速率等方面。2精选文库3、编程模式从本质上讲，云计算是一个多用户、 多任务、支持并发处理的系统。 高效、简捷、快速是其核心理念，它旨在通过网络把强大的 服务器计算资源方便地分发到终端用户手中， 同时保证低成本和良好的用

8、户体验。 在这个过程中， 编程模式的选择至关重要。云计算项目中分布式并行编程模式将被广泛采用。分布式并行编程模式创立的初衷是更高效地利用软、硬件资源，让用户更快速、更简单地使用应用或服务。在分布式并行编程模 式中，后台复杂的任务处理和资源调度对于用户来说是透明的，这样用户体验能够大大提升。 MapReduce是当前云计算主流并行编程模式之一。 MapReduce模式将任务自动分成多个子任务，通过 Map和 Reduce两步实现任务在大规模计算节点中的高度与分配。MapReduce是 Google 开发的 java 、Python 、C+编程模型， 主要用于大规模数据集（大于 1TB） 的并行运

9、算。 MapReduce模式的思想是将要执行的问题分解成Map（映射）和 Reduce（化简）的方式，先通过 Map程序将数据切割成不相关的区 块，分配（调度）给大量计算机处理， 达到分布式运算的效果， 再通过 Reduce 程序将结果汇整输出。4、大规模数据管理处理海量数据是云计算的一大优势。那么如何处理则涉及到很多层面的东西，因此高效的数据处理技术也是云计算不可或缺的核 心技术之一。对于云计算来说，数据管理面临巨大的挑战。 云计算不仅要保证数据的存储和访问， 还要能够对海量数据进行特定的检索和分析。 由于云计算需要对海 量的分布式数据进行处理、分析，因此，数据管理技术必需能够高效的管理大量

10、的数据。3精选文库Google 的 BT（ BigTable ）数据管理技术和 Hadoop团队开发的开源数据管理模块HBase是业界比较典型的大规模数据管理技术。BT（BigTable ）数据管理技术： BigTable 是非关系的数据库，是一个分布式的、持久化存储的多维度排序 Map.BigTable 建立在 GFS, Scheduler, Lock Service和 MapReduce之上，与传统的关系数据库不同， 它把所有数据都作为对象来处理，形成一个巨大的表格，用来分布存储大规模结构化数据。 Bigtable 的设计目的是可靠的处理 PB级别的数据，并且能够部署到上千台机器上。开源数

11、据管理模块 HBase:HBase是 Apache 的 Hadoop项目的子项目，定位于分布式、面向列的开源数据 库。 HBase不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库。 另一个不同的是 HBase基于列的而不是基于行的模式。作为高可靠性分 布式存储系统， HBase在性能和可伸缩方面都有比较好的表现。利用 HBase技术可在廉价 PC Server 上搭建起大规模结构化存储集群。5、分布式资源管理云计算采用了分布式存储技术存储数据，那么自然要引入分布式资源管理技术。在多节点的并发执行环境中， 各个节点的状态需要同步， 并且在单个节点出现故障时，系统需要有效的机制保证其

12、它节点不受影响。 而分布式资源管理系统恰是这样的技术，它是保证系统状态的关键。另外，云计算系统所处理的资源往往非常庞大， 少则几百台服务器， 多则上万台，同时可能跨跃多个地域。 且云平台中运行的应用也是数以千计， 如何有效地管理这批资源，保证它们正常提供服务，需要强大的技术支撑。因此，分布式资源管理技术的重要性可想而知。全球各大云计算方案 / 服务提供商们都在积极开展相关技术的研发工作。其中 Google 内部使用的 Borg 技术很受业内称道。另外，微软、 IBM、Oracle/Sun 等云计算巨头都有相应解决方案提出。6、信息安全调查数据表明，安全已经成为阻碍云计算发展的最主要原因之一。

13、数据显示，32%已经使用云计算的组织和 45%尚未使用云计算的组织的 ICT 管理将云安全作为进一步部署云的最大障碍。因此，要想保证云计算能够长期稳定、快速发展，安全是首要需要解决的问题。事实上，云计算安全也不是新问题，传统互联网存在同样的问题。只是云计算出现以后，安全问题变得更加突出。在云计算体系 中，安全涉及到很多层面，包括网络安全、服务器安全、软件安全、系统安全等等。因此，有分析师认为，云安全产业的发展，将把传统安全技术提到一个新的阶段。现在，不管是软件安全厂商还是硬件安全厂商都在积极研发云计算安全产品和方案。包括传统杀毒软件厂商、软硬防火墙厂商、IDS/IPS 厂商在内的各个层面的4精

14、选文库安全供应商都已加入到云安全领域。 相信在不久的将来， 云安全问题将得到很好的解决。7、云计算平台管理云计算资源规模庞大， 服务器数量众多并分布在不同的地点，同时运行着数百种应用，如何有效地管理这些服务器，保证整个系 统提供不间断的服务是巨大的挑战。云计算系统的平台管理技术， 需要具有高效调配大量服务器资源， 使其更好协同工作的能力。其中，方便地部署和开通新业务、 快速发现并且恢复系统故障、通过自动化、智能化手段实现大规模系统可靠的运营是云计算平台管理技术的关键。对于提供者而言，云计算可以有三种部署模式，即公共云、私有云和混合云。三种模式对平台管理的要求大不相同。对于用户而 言，由于企业对于 ICT 资源共享的控制、对系统效率的要求以及 ICT 成本投入预算不尽相同， 企业所需要的云计算系统规模及可管理性能也大不相同。因此，云 计算平台管理方案要更多地考虑到定制化需求，能够满足不同场景的应用需求。包括 Google、IBM、微软、 Oracle/Sun 等在内的许多厂商都有云计算平台管理