集群存储备份方案

《集群存储备份方案》由会员分享，可在线阅读，更多相关《集群存储备份方案（17页珍藏版）》请在金锄头文库上搜索。

1、客户需求客户需求目前客户维护有一个 windows2003 域，其中有将近 500 用户。每个用户日常使用的客户端也是 windows 操作系统。 目前客户端常用数据类型，包括用户做处理之后生成的大文件；以及可以预见的一些音频、视 频、PDF 等非结构化文件为主的文件。 客户希望提供的存储能够给这些客户端提供统一的存储界面，非常方便的实现文件往存储上的 存放；目前考虑存储空间大概 20TB（可以视为有效容量） 。 此外，方案还需要考虑如下问题： 安全性：能够提供基于 SSL 的访问模式； 易管理性：对客户端影响越少越好；可以加入现有域；提供限额管理的功能 可靠性：提供基于至少磁盘级的保护模式；

2、 备份方案：结合 VTL，提供最好的备份方案。方案介绍方案介绍针对客户以上需求，我们推荐使用 Isilon 公司的集群存储。 所谓集群存储是将多台存储设备中的存储空间聚合成一个能够给应用服务器提供统一访问接口 和管理界面的存储池，应用可以通过该访问接口透明地访问和利用所有 存储设备上的磁盘，可以充 分发挥存储设备的性能和磁盘利用率。数据将会按照一定的规则从多台存储设备上存储和读取，以 获得更高的并发访问性能。而 Isilon 公司的集群存储则是这一领域的执牛耳者。 跟其他厂家的存储相比，Isilon 的集群存储具有如下的特点： Isilon 集群存储是真正全对称的存储架构，每个节点地位都相同；

3、某个节点失效时，不影响 数据的访问以及数据的一致性。 Isilon 集群存储提供两级容错机制 第一级是节点级容错机制：可以提供 N+M 级别的容错能力。M 可以是 1，2，3，4；根据 N（集群存储节点个数）不同，可以使用不同的 M；M 个节点失效以后，剩下的 N-M 个节 点仍然占据多于【N/2】就可以保证数据的安全性。 注意这里的数据安全性是节点级别的，而不是磁盘级别的，换句话说，一个 Isilon 存储节点 中可以有 12 块硬盘，如果采用 N+1 的保护模式，那么最多可以 12 块硬盘出现问题，而数 据不丢失。 第二级，除了以上提到的节点级容错之外，Isilon 集群存储提供针对目录或

4、者文件级别的镜 像保护，保护数目根据数据重要程度，从 1X 到 8X 不等。 Isilon 集群存储包括前端网络和后端网络，前端网络对客户端提供访问，每个节点有两个千 兆以太网，可以提供 NIC 的容错机制。考虑到对称存储架构，NIC 的容错没有太大意义；后 端网络由两个 10GB 的 Infiniband 提供互联，大大减少了存储节点之间数据传输的网络延时。通过前端网络，某个被 SmartConnect 功能选出的节点接受读写请求，然后所有节点通过后 端网络都参与此读写过程，这样每个读写操作都是由多台节点参与完成，效率和性能都大 大提高。 各个节点都参与数据读写，兼顾性能和可用性。在提高可用

5、性的同时，性能也线性地得到提高，跟某些厂商性能和可用性不可兼顾的产品来说，显然有着巨大的优势。 同样价格情况下，参与数据读写的节点个数比其他厂商要多；而目前 Isilon 集群存储采用 Intel Xeon dual-core 2.0GHz 的 CPU，由此可见处理能力比其他厂商双节点机头的架构要高出 很多。 Isilon 集群存储独特的 TrueScale 技术，可以把多台节点内内存，NVRAM，Cache 的容量整合 成一个大的容量，也就是节点越多，NVRAM，内存，Cache 的容量越大，能够提供更好的性 能。 可以方便的扩展。目前 Isilon 集群存储，最小规模是三个节点构成，最大规

6、模是 96 个节点 构成；新节点加入原有节点，不会影响原有存储对客户端提供服务，而且加入单一节点的 时间仅仅需要 60 秒钟。 支持超大文件系统 OneFS。目前 Isilon 集群存储，可以支持 4T1.6P 的单一文件系统 OneFS，对于 CAD、CAM、CAE 用户常见的大文件存放，提供和很好的低层架构。而且 OneFS 非常适合大文件的存取。 Isilon 集群存储，通过 OneFS 提供 Autobalance 功能。此功能保证当加入一个新节点到原有 集群内部时，原有集群内的存储数据会自动重新分布到新的节点上，容量上的差别大约保 持在 5的差别水平上。 OneFS 内置对 FTP、

7、HTTP、Telnet、SSH、NFS、CIFS、NDMP、SNMP 等协议的支持，另外还 可以加入现有的 ADS、LDAP、NIS 用户管理域中。 Isilon 集群存储，管理界面非常简单，无论是 4T 容量还是 1.6P 容量，操作界面都如下图所 示，非常简单明了。此次方案我们推荐如下架构图：采用 NDMP 进行数据到磁带机的备份。客户端，可以支持 Windows 服务器、客户端；Linux/Unix 服务器；Mac 服务器。 网络分为前端网络和后端网络，其中前端网络将占用现有的中心交换机端口，后端交换机将采 用 Infiniband 交换机。 存储将采用 6 台 Ision IQ6000

8、X 构成集群存储，采用 N+2 保护模式，可用容量大约为 22TB。 其配置和报价参见下节。报价报价集群存储与集群存储与 SAN/NAS 的主要技术差异；的主要技术差异；首先，集群存储和 SAN/NAS 结构分别对应不同的数据类型。一类是结构化数据，即数据库，这类数据的特点是对 IOPS 的要求比较高，基本上是随机的数据访问，适合使用 FC-SAN另一类是非结构化数据，即文件。比较适合使用 NAS 或 Isilon 集群存储，特别是有文件共享需求的应用，对于音视频文件（称为数字内容）尤其是文件尺寸越大，越适合使用 Isilon 集群存储。很多应用系统往往既有结构化数据，又有非结构化数据，这需要

9、具体分析，看哪一种类型的磁盘阵列产品更适合。第二，从系统维护的角度来看，集群存储将大大降低维护系统的复杂程度，提高系统使用率。安装：集群存储将文件系统、卷管理和 RAID 完全整合到了单一文件系统 OneFS 中，因此，在日常维护存储中，只需要对集群存储安装上架、配置网络参数，共享数据三步工作就可以了。不需要做卷规划、RAID 规划，HBA 配置、HBA 卡与操作系统是否 match 等操作。扩展存储：传统的 SAN/NAS 在扩展存储的时候，一般都需要做RAID、volume、HBA、LUN 的规划等工作，而且一般还需要对原来处于生产中的系统统一下电，以便进行扩展新存储。而对于集群存储，扩展

10、工作只需要对新存储上架，在管理界面里按一下添加按钮就可以完成以上所有操作附件： 第二章第二章 Isilon 公司及其产品介绍公司及其产品介绍1. Isilon 公司简介公司简介美国 Isilon 公司是全球群集存储系统的主要供应商，是该领域的领导者。总部位于美国华盛顿州的西雅图。创建于 2001 年，于 2006 年 12 月 15 日在美国纳斯达克成功上市。其的 投资方为世界著名的 IT 投资公司 Seuuoia Capital 。Isilon 的企业级、模块化的 IQ 产品提供智能化的、专门为数字内容服务存储系统。这种群集存储系统，具备极高的存储处理通量，无与伦比的简单和高可扩展性。企业的

11、文档、图像、视频等非结构化数据近来增长很快，而传统的存储设备根本不能满足对这种数据的处理需要。这些数据要消耗大量的存储空间，其增长速度远远超过传统数据对存储的需要，并且常常需要很高的通量处理能力，常常需要高度并发的访问。Isilon 群集存储系统的核心是它的OneFS 操作系统，它能够加速用户对数字内容和非结构化数据的存取，极大地减少存储系统的复杂性，降低存储费用。Isilon 的 IQ 群集存储产品线，满足从最高性能的第一级应用到第二级的企业数据归档、磁盘到磁盘的备份和容灾等的需要。依靠 OneFS，Isilon 的 IQ 产品家族创建的是一个统一的、易于扩展的存储池。它易于安装、管理和扩展

12、。一个 10TB，50TB 或 100 多 TB 的群集系统可以在不到 10 分钟时间完成配置和安装。系统扩展无需宕机，一分钟就可以完成。Isilon 的产品线包括 IQ200, 1920, 3000、6000、9000 和 12000 平台节点，EX6000、EX9000、EX12000 和 IQ Accelerator 扩展节点，可选用的软件包括 SyncIQ, SnapShotIQ,和 SmartConnect 等。这些产品能够满足用户对非结构化数据的不同容量和性能要求。另外，Isilon 独有的 TrueScale技术使得客户可以根据实际应用的需要，同时或分别线性扩展其性能和容量。现在

13、石油和天然气、媒体和娱乐、Internet 服务、有线电视和通信、生命科学、制造业和政府等领域的客户都在大量使用 Isilon 的产品，以此来大大提高他们的生产效率。在 http:/ 网页，你能看到 Isilon 发布的部分客户介绍。 2. Isilon 产品的技术特点产品的技术特点突破性的集群存储性能突破性的集群存储性能Isilon IQ 集群存储系列产品设计基点是为满足以数据为核心的企业对高性能计算环境的要求。Isilon 的集群存储方案是由 OneFS操作系统软件和最先进的符合行业标准硬件所组成，提供灵活的“按需购买，渐进扩展” （pay-as-you-grow）的企业级集群存储系统。内

14、置 TrueScale技术的 OneFS，使 Isilon IQ 成为业内第一个也是惟一的能使性能和容量线性或独立升级的存储系统。这种灵活可调节的 新型系统拥有一套高效的集群存储软件应用，为用户提供了现成的存储方案，完全满足多种应用和 工作流需要。从 4TB 升级到 2.3PB每秒 10GB 的吞吐能力60 秒内完成对性能和容量的线性或独立升级最易于管理的存储系统Isilon 的产品线包括 Isilon IQ200、1920、3000、6000、9000 和 12000 平台节点，Isilon EX6000、EX 9000、EX12000 和 Isilon IQ Accelerator 扩展节

15、点，可选用的软件包括 SyncIQ、SnapshotIQ、 SmartConnect、MigrationIQ和 SmartQuotas。这套灵活的革新性产品能提供单一文件系统内高达 2.3PB 的容量和每秒 10GB 的吞吐量，支持高性能的 InfiniBand 用于低延迟、高带宽的集群内通信。 阅读 Taneja 对 InfiniBand 和集群存储的性能的技术简报Isilon IQ 集群存储产品线满足企业全方位的存储要求，从最高性能的一级应用到二级的企业归档、磁 盘到磁盘备份和灾难恢复。基于 OneFS 操作系统，Isilon IQ 系列产品能提供易于安装和增容的单个可 扩展存储池。一旦装

16、上机架，一个 10TB、50TB 或 100TB 的集群能在 10 分钟之内完成安装和配置， 扩容可在不停机情况下在 60 秒内完成。Isilon 公司深知不同的应用和工作流需要不同的存储容量和存储性能组合。Isilon IQ 集群存储产品线 满足企业级用户全方位的存储要求，从最高性能的一级应用到二级的企业归档、磁盘到磁盘备份和 灾难恢复。Isilon 的产品线包括 Isilon IQ 200、1920、3000、6000、9000 和 12000 平台节点，Isilon EX6000、EX 9000、EX12000 和 Isilon IQ Accelerator 扩展节点。Isilon IQ 集群存储系统已被应用到那些要求最为苛刻的用户使用环境中。Isilon IQ 平台节点系统使用 标准的千兆以太网进行前端互连，使用千兆以太网或者高性能、低延迟的 InfiniBand 进行集群内通信， 无需额外的花费。Isilon IQ 平台系统平台系统特