《综合布线存储方案课件》由会员分享，可在线阅读，更多相关《综合布线存储方案课件（51页珍藏版）》请在金锄头文库上搜索。
1、存储&备份的基础bird_man2003-10-261综合布线存储方案n存储备份系统的发展n存储备份n存储备份技术中的误区n构建存储备份系统的原则内容2综合布线存储方案存储备份系统的发展n软盘，硬盘，磁带，磁光盘nscsi技术，ssa技术，fc技术，iscsi技术ndas，nas，sannLanbackup，lanfreebackup，serverfreebackupn.3综合布线存储方案SCSI技术与RAID技术nSCSI是SmallComputerSystemInterface(小型计算机系统接口)的英文缩写。SCSI最早是一种并行连接使用SCISI命令的计算机硬件接口。nRedundan
2、tArrayofInexpensive(orIndependent)Drive。RAID是1988年由美国加州大学的Berkeley分校的DavidPatterson等几人提出来的。4综合布线存储方案RAIDnRAID条切“striped”的存取模式在使用数据条切DataStripping的RAID系统之中，对成员磁盘驱动器的存取方式，可分为两种：并行存取ParalleledAccess独立存取IndependentAccessRAID2和RAID3是采取并行存取模式。RAID0、RAID4、RAID5及RAID6则是采用独立存取模式5综合布线存储方案平行存取模式n并行存取模式支持里，是把所有
3、磁盘驱动器的主轴马达作精密的控制，使每个磁盘的位置都彼此同步，然后对每一个磁盘驱动器作一个很短的I/O数据传送，如此一来，从主机来的每一个I/O指令，都平均分布到每一个磁盘驱动器。n为了达到并行存取的功能，RAID中的每一个磁盘驱动器，都必须具备几乎完全相同的规格：转速必须一样；磁头搜寻速度AccessTime必须相同；Buffer或Cache的容量和存取速度要一致；CPU处理指令的速度要相同；I/OChannel的速度也要一样。总而言之，要利用并行存取模式，RAID中所有的成员磁盘驱动器，应该使用同一厂牌，相同型号的磁盘驱动器。6综合布线存储方案独立存取模式n相对于并行存取模式，独立存取模式
4、并不对成员磁盘驱动器作同步转动控制，其对每个磁盘驱动器的存取，都是独立且没有顺序和时间间格的限制，同时每笔传输的数据量都比较大。因此，独立存取模式可以尽量地利用overlapping多任务、TaggedCommandQueuing等等高阶功能，来“隐藏”上述磁盘驱动器的机械时间延迟Seek和RotationalLatency。n由于独立存取模式可以做overlapping多任务，而且可以同时处理来自多个主机不同的I/ORequests，在多主机环境如Clustering，更可发挥最大的性能。7综合布线存储方案RAID级别相对优点相对缺点nRAID0存取速度最快没有容错nRAID1完全容错成本高
5、nRAID3写入性能最好没有多任务功能nRAID4具备多任务及容错功能Parity磁盘驱动器造成性能瓶颈nRAID5具备多任务及容错功能写入时有overheadnRAID0+1/RAID10速度快、完全容错成本高8综合布线存储方案TapenDDS,8mm,AIT(HP,Exabyte,SONY)nDLT(ATL)nLTO(IBM,HP,Segate)n9840(STK)n.9综合布线存储方案SANnSAN=StorageAreaNetwork(存储区域网络)n是一种基于光网的特殊的后台后台数据存取网络n提供了一个性能稳定的数据高速存取平台n关键概念:n支持前台企业信息处理网络 (例如：Ethe
6、rnet及TCP/IP）有助于减轻关键工作量和增加应用性能及高可用性n成为一种有灵活同时有扩展性的数据平台来解决现有的数据迁移和数据共享瓶颈问题n基于NCITS T11:光纤通道(Fibre Channel)标准I/O接口 (X3.230-1994) 10综合布线存储方案光纤通道的特性n光纤通道的优点n为一个新的多用途网络多用途网络信息基础结构, 用于连接开放系统存储, 网络, 视频应用和服务器集群应用.n为上层协议(SCSI,IP，ATM，IEEE 802.2等)提供一个通用硬件传输平台n高速高速: 现在可以提供2Gbit(200MB)/秒的数据传输速率, 全双工专有连接,未来可升级至10G
7、bit/秒n串行的串行的, ,无阻塞无阻塞(non-blocking)数据传输n最大10公里连接距离(通过扩展器可连接上千公里上千公里,适于灾难恢复应用)n多平台多平台系统支持(包括 AIX, NT, Solaris, HP/UX, UNIX, LINUX, Novell,等)n支持传统传统环境和应用n光纤通道的技术能力n不存在无线电信号散射 (RFI), 从而消除了电磁信号n串行数据传输, 每传输一位需要0.94纳秒(极小的时间延迟)n使用8b/10b编码方式将8位转换为10b格式进行串行传输串行传输(内置时钟信号)n先进的流控制流控制系统保证数据按顺序传输.n最多可以连接1 1千千6 6百
8、万百万个节点(交换Fabric模式)n帧大小可调整, 支持128MB128MB的批量数据传输n强大的错误更正能力(位错误位错误率率 = 1x10 = 1x10-12-12), 比原有铜连接网络强大1,000倍11综合布线存储方案光纤通道=是SANFabric的基础为存储系统提供一个网络连接模式客户机LAN(局域网局域网)广域网广域网存储区域网存储区域网（第二网）Fabric = 第二网第二网“Fabric”是一个由智能光纤通道交换机构成并具有良好系统设计的高智能网络,这一数据网络可以提供企业级的性能,扩展能力,可管理能力,可靠性和可用能力服务器存储子系统第一网第一网12综合布线存储方案光纤通道
9、的拓扑结构nFibre Channel有三种拓扑结构有三种拓扑结构:n点对点点对点(Point-to-Point) 两个设备之间互连n仲裁环仲裁环(Arbitrated Loop) 最多支持126个设备互连，形成一个仲裁环 n交换式交换式Fabric(Switch Fabric) 最多1千6百万个设备互连点对点点对点交换式交换式 FabricArbitrated Loop (仲裁环仲裁环)13综合布线存储方案光纤通道协议映射高层协议(ULPs)支持现有协议对于操作系统是透明的不做更改+新的能力FC-4FC-3FC-0FC-1FC-2物理变换编码 / 解码结构协议8b/10b 编码铜, 光连接1
10、4综合布线存储方案第二网启动顺序：n建议遵循一定的顺序启动网络设备n首先要启动的就是网络系统，包括所有的交换机并确定所有的设备连接正常n第二网启动进程:(1)启动Fabric1(3)启动服务器系统3(2)启动存储设备215综合布线存储方案NASn网络附加存储设备（NetworkAttachedStorage，NAS）是一种专业的网络文件存储及文件备份设备，或称为网络直联存储设备、网络磁盘阵列。NAS是基于LAN的，按照TCP/IP协议进行通信，面向消息传递，以文件的I/O方式进行数据传输。在LAN环境下，NAS已经完全可以实现异构平台之间的数据级共享。nNAS结构和SAN最大的区别就在于NAS
11、有文件操作和管理系统，而SAN却没有这样的系统功能，其功能仅仅停留在文件管理的下一层，即数据管理。nSAN和NAS并不是相互冲突的，是可以共存于一个系统网络中的，但NAS通过一个公共的接口实现空间的管理和资源共享，SAN仅仅是为服务器存储数据提供一个专门的快速后方通道，在空间的利用上，SAN和NAS也有截然不同之处，SAN是只能独享的数据存储池，NAS是共享与独享兼顾的数据存储池。16综合布线存储方案ISCSIniSCSI（互联网小型计算机系统接口）是一种在Internet协议网络上，特别是以太网上进行数据块传输的标准。它是由Cisco和IBM两家发起的，并且得到了IP存储技术拥护者的大力支持
12、。是一个供硬件设备使用的可以在IP协议上层运行的SCSI指令集。简单地说，iSCSI可以实现在IP网络上运行SCSI协议，使其能够在诸如高速千兆以太网上进行路由选择。nISCSI的工作流程niSCSI协议就是一个在网络上封包和解包的过程，在网络的一端，数据包被封装成包括TCP/IP头、iSCSI识别包和SCSI数据三部分内容，传输到网络另一端时，这三部分内容分别被顺序地解开。17综合布线存储方案数据时任何资源的基础DataBusinessIntelligenceKnowledgeWisdomInformation18综合布线存储方案Backup（备份）nBackup-Definitionn“B
13、ackupisacopytypeofoperation,designedtoprotectdatafromaccidentalormaliciouslossordamage”File12 (or more)Backup Copy备份过程拷贝19综合布线存储方案为什么要备份System stolenUser Data and System LossSystem damagedUser Data and System Loss/DowntimeAccidental Accidental Accidental Directory DeletionDirectory and/or Hacker Int
14、rusionCorrupt or Lost DataMagnetic Disk FailureCorrupt or Lost DataCPU/Motherboard FailureCorrupt or Lost Data and DowntimeNetwork/Interface FailureCorrupt or Lost Data/Loss of Connectivity Application Halt or CrashCorrupt or Lost DataOperating System Halt or CrashCorrupt or Lost Data事件结果20综合布线存储方案为
15、什么要备份FloodSite Loss - Complete or PartialExtreme Weather EventSite Loss - Complete or PartialSeismic EventSite Loss - Complete or PartialAviation AccidentSite Loss - Complete or PartialTerrorismSite Loss - Complete or PartialEmergency EvacuationLoss of Access to Site灾难后果21综合布线存储方案Fullbackup（全备份）全备份.
16、全备份全备份是在某一个时间点上所有数据的一个完全拷贝22综合布线存储方案Differential(差分)BackupsFull BackupDifferentialFull BackupA differential backup is a copy of all the data since the last full Backup.23综合布线存储方案Incremental(增量)BackupsFull Backup.IncrementalsFull BackupIncremental backup is a copy of only the data that have changed s
17、ince the last backup.24综合布线存储方案恢复n恢复过程将数据从磁带拷贝回磁盘n备份是比恢复早的一个时间点的完全映象备份记录了文件的目录结构，权限等，备份在具体的某盘磁带，磁带在磁带库中具体的槽位等这些信息存储在备份软件的数据库中通常被称为元数据DiskTape25综合布线存储方案备份数据的生命周期Databacked upBrowse PolicyExpiresBROWSABLERetentionPolicy ExpiresRECOVERABLEVolumeRecycledRECYCLABLE / RECOVERABLE26综合布线存储方案Archive(归档)Archi
18、ve - Definition“Archive is a move type of operation, designed to preserve a future reference”源文件1.1.备份归档的文件归档过程移动, 校验, (删除)27综合布线存储方案HierarchicalStorageManagement(HSM)HSM 是充分保护现有的硬盘存储资源的基础上，将很少使用的文件保存到相对较为便宜的磁带上，当应用需要访问的时候自动进行回调，相对而言在访问速度上会有所影响；对于应用来说是透明的。1.1.HSM Process “透明的” 移动28综合布线存储方案备份服务器，备份客户
19、端nBackupServerDefinitionn“TheBackupServeristhecentralcontrolandmanagementpointofthebackupandrestoreprocess.ItholdstheIndexdatabase(Metadata)”nAClient-Definitionn“Aclientisaserverorworkstationthatbacksupitsdataoverthenetworktothebackupserver”.29综合布线存储方案传统lan环境下数据流走向ApplicationServerLANRAID or JBODTap
20、e LibraryBackupServer30综合布线存储方案Lanfree备份数据流的走向Local Area NetworkMetadataReadWriteBackupServerBackupClient31综合布线存储方案Serverfree数据流走向DiskFibre ChannelLocal Area NetworkTapeStorage Area Network32综合布线存储方案San环境下磁带驱动器的共享TapeLocal Area NetworkSANFibreChannel33综合布线存储方案集群环境下的备份Backup ServerVirtual ClientBacku
21、p34综合布线存储方案Nas的备份NAS ServerTapeBackupServerNDMP CommunicationNDMP - Network Data Management Protocol - is a storage specific communications protocol that allowsNAS systems to backup to local tape libraries under the control of a remote backup server35综合布线存储方案存储备份的误区36综合布线存储方案误区1:混淆备份、双机热备份和容灾系统在为大型企
22、业提供咨询服务时，经常有用户反映:“我们的数据库软件有容错和自动恢复功能，服务器主机也做了双机热备份，而且以后还要建立容灾系统。在这么高标准的安全性保证下，我们再也不需要用磁带设备和备份软件每天做备份了。”37综合布线存储方案误区2:错解数据迁移n随着社会的发展，现代企业的流动性大大增加，给企业的数据“搬家”在所难免。很多企业由于业务需要，都建立了异地的数据分发、数据集中或者数据同步一类的系统。一些用户把这种系统称为“数据迁移”。不妥的是，在存储技术中，“数据迁移”这一概念早已有了明确的定义，而且与之相去甚远。真正的数据迁移技术(也被称为分层存储管理)是指:由在线存储设备和离线存储设备共同构成
23、一个协调工作的存储系统，该系统在在线存储设备和离线存储设备之间动态地管理数据，使得访问频率高的数据存放于性能较高的在线存储设备中，而访问频率低的数据存放于较为廉价的离线存储设备中。这样，既可以保证在绝大部分状况下系统的性能，同时又大幅度降低了系统成本。38综合布线存储方案构建存储备份的原则39综合布线存储方案原则一:信息是存储的核心n什么样的企业需要存储系统，实际上，任何企业都需要存储系统。因为今天企业的核心问题之一是信息，而建立存储系统的目的，就是对信息进行保护、管理和共享。40综合布线存储方案原则二:要产品也要技术n一个典型的数据存储系统基本由以磁盘阵列为主的在线存储系统、以磁带设备为主的
24、离线存储系统、存储管理软件、交换设备和主机适配器等周边设备共4部分的产品构成。由于产品提供商很难对用户的具体数据特征做出深入细致的分析，并给出具有针对性的方案，所以在用户还没有足够的能力来自行设计存储系统之前，选择一家有经验的存储专业集成商是很必要的。41综合布线存储方案原则三:明确需求，切勿一味追新n作为用户，应该充分把握自己的实际情况，不要盲目地跟随厂商的思路。在明确需求之时，可以咨询有经验的行业专家顾问，或者考察同行业的系统设计和实施情况，万不可把自己至关重要的业务作为“试验田”。42综合布线存储方案原则四:长远考虑，打好基础n存储是应用系统的基础和核心，它的丝毫变化都将“牵一发而动全身
25、”，同时，存储系统出现的问题和故障也可能影响到整个IT系统的正常运行。所以，建立存储系统之初就应该考虑到稳定性和结构扩展性等方面的要求，保证系统能够稳定而长期的工作。43综合布线存储方案综合评价为我所用n确定好选择哪种存储系统的基本结构后，我们可以考虑产品问题。存储产品的评价基本可以集中在下面几个方面n容错能力、n性能、n容量、n连接性、n管理性n附加功能44综合布线存储方案1容错能力n容错能力是指在存储设备的设计方面对各种偶然性错误和意外情况的预期，以及采取的预防或补救措施。这里，用户需要注意的是，存储系统是一个从软到硬的复杂系统，所以，对数据保护能力的评价应当考虑到整个系统。45综合布线存
26、储方案2性能n存储产品的性能评价是最容易的，因为这一指标可以被充分量化。对磁盘阵列产品来说，性能指数主要有2个:带宽和IOPs(每秒I/O次数)。带宽决定于整个阵列系统，与所配置的磁盘个数也有一定关系;而IOPs则基本由阵列控制器决定。在Web、Mail和数据库等小文件频繁读写的环境下，性能主要由IOPs决定。在视频和测绘等大文件连续读写的环境下，性能主要由带宽决定。可见，在不同的应用方式中，需要考察的侧重点各不相同。46综合布线存储方案3容量n容量是最简单的一个性能指标，需要注意的是，用户不仅要关心产品的最大容量，还要关心厂商推荐使用容量以及扩容成本等问题。47综合布线存储方案4连接性n在传
27、统的LAN环境中，连接不存在问题。n在SAN环境中，以光纤通道连接设备为中心，要连接主机、磁盘阵列和磁带库等设备，环境比较复杂，因此在产品选型时，充分考虑设备间的连接性。选择具有良好的开放性和连接性的产品，不仅为当前系统正常连接和运行提供保障，也为系统未来扩展提供更大的空间和灵活性。48综合布线存储方案5管理性首先n用户应考虑产品所提供的管理功能是否实用可靠;n其次，支持中心化管理和远程管理的产品一定让用户很省事;n还有，很多产品的故障自动通知机制给用户带来方便，同时也构成安全隐患;n最后，在配置改变或系统扩容时，无须宕机或尽可能缩短宕机时间是企业级产品的重要特征。49综合布线存储方案6附加功能n现在的存储产品，尤其是部门级和企业级的在线、离线存储产品，已经不仅仅是存储数据的BOX，而是一个智能的小型系统。各厂商将很多功能性软件都整合到自己的存储设备中，以向用户提供更好的解决方案。目前，比较常见的附加功能主要有数据快照功能、LUNMasking功能和异地数据复制以及scsicopy功能等几种。50综合布线存储方案n谢谢51综合布线存储方案
