《FusionStorage 存储方案介绍.pptx》由会员分享，可在线阅读，更多相关《FusionStorage 存储方案介绍.pptx（49页珍藏版）》请在金锄头文库上搜索。
1、FusionStorage存储方案介绍 FusionStorage3 30培训大纲 基本原理 1 FusionStorage分布式存储软件总体架构 FusionStorage多资源池架构 存储层 管理集群 FSM规格 一套DSware两个FSM 互为主备关系 可以采用虚拟化部署也可以采用物理机部署MDC规格 MDC最大支持96个MDC 每个MDC最多管理2个pool或者2000块盘 VBS规格 单套DSware下的VBS可以访问任何一个pool VBS最大规格为10240 Pool规格 一套DSware最大支持128个池 每个pool相互独立 可有采用不同的副本数以及不同的Cache介质 多池
2、规格 DSware实现多资源池 可缩小故障域 单套DSware规模最大达到49152块盘 最大4096台服务器 Cache 灵活设置每个池的Cache配比关系 灵活选择每个pool的Cache介质 高可靠性 通过故障隔离 多MDC等机制 各资源池相对独立 故障互不影响 约束 1 同一个资源池下不支持多种主存或Cache的混用 2 同一个池不支持两种不同的网络协议混用 FSM集群 计算层 FusionStorage基本原理 数据路由 P1 P2 P3 P4 P5 P6 Pn Hashspace Generatekey1 LUN1 LBA1 Data Key1 LUN1 LBA1 Data Has
3、h Key1 Queryroutingtable VBS OS OSD FusionStorage数据路由采取分层处理方式 1 VBS通过计算确定数据存放在哪个服务器的哪块硬盘上 2 OSD通过计算确定数据存放在硬盘的具体位置 FusionStorage基本原理 集群管理 系统启动时 MDC与ZK互动决定主MDC 主MDC与其它MDC相互监控心跳 主MDC决定某MDC故障后谁接替 其它MDC发现主MDC故障又与ZK互动升任主MDC OSD启动时向MDC查询归属MDC 向归属MDC报告状态 归属MDC把状态变化发送给VBS 当归属MDC故障 主MDC指定一个MDC接管 最多两个池归属同一个MDC
4、 VBS启动时查询主MDC 向主MDC注册 主MDC维护了一个活动VBS的列表 主MDC同步VBS列表到其它MDC 以便MDC能将OSD的状态变化通知到VBS 向MDC确认自己是否为leader FusionStorage基本原理 卷映射 资源池 类似于SAN的RAID组概念 与RAID相比 其优点是 条带宽度 最大96块盘 2份拷贝 提升超大存储空间 避免高IO应用导致热点瓶颈动态热备 所有硬盘都可用作资源池的热备盘简单结构 资源池 Volume二层结构 没有LUN结构 服务器直接看到Volume Disk P1 P2 Py Disk Disk Disk Disk Disk P1 P2 Px
5、 资源池1 Server1 Server2 Server3 资源池2 主要特性 2 FusionStorage关键特性 规格概览 软件特性 块存储功能 SCSI iSCSI接口 多资源池基于主机虚拟机复制存储快照 存储链接克隆 存储SSDCache和存储自动分级 数据备份兼容iSCSILunMapping LunMasking VAAI跨资源池的卷冷迁移卷的在线 离线扩容 部分关键规格 同时支持不同性能的存储池满足性能需求 SSDCache SAS1 SAS2 SAS3 SSDCache SATA1 SATA2 SATA3 SSDn Node2 NVDIMM SSD1 SSD2 SSD3 SS
6、Dn Node3 NVDIMM SSD1 SSD2 SSD3 SATAn Node1 SSDCache SATA1 SATA2 SATA3 Pool1 故障隔离 提升可靠性 Cluster1 Cluster2 Cluster3 Cluster4 Cluster5 FSM MDC集群 VBS集群 业界最大规格支持 详见规格总表软件定义存储策略 支持以资源池为单位配置主存介绍 Cache介绍 副本冗余类型 安全等级策略 柜级 服务器级 盘级 灵活资源池共享策略 支持同一台服务器 刀片上创建多个资源池 SSD卡做Cache时 支持在一个服务器上的多个资源池间共享 高可靠性 通过故障隔离 多MDC等机
7、制 各资源池相对独立 故障互不影响 约束 1 同一个资源池下不支持多种主存或Cache的混用 2 卷以及它的快照只属于某一个资源池 不支持跨池存放 Pool2 Pool3 FusionStorage多资源池特性 跨资源池卷冷迁移特性 冷迁移功能 把卷从srcpool迁移到dstpool步骤 创建目标卷 卷数据复制 删除源卷 目标卷改名 完成 1 迁移过程中 源卷不能有写数据的操作 所以叫做 冷 迁移 2 可以通过工具调用复制接口 价值 场景1 池之间的容量平衡 容量满的池迁移到一个空闲的池 场景2 卷在不同性能的池之间的迁移 从低性能的池向高性能的池迁移 VAAI VMWarevSphereS
8、torageAPI ArrayIntegration CopyOffload BlockZeroing OSD OSD OSD OSD 00 00 00 00 00 00 00 00 VMonHost1 VMonHost2 AtomicTestandSet ATS VMonHost1 VMonHost2 VMFS集群 vDisk dataStore VBSInCVM VMFS集群 vDisk4VM1 vDisk4VM2 MigrateVM2 DeleteVM1 VBSInCVM VAAI VMFS集群 vDisk4VM2 MitrateVM2 DeleteVM1 UNMAP Reclaimco
9、mmand Clone vMotionv Clone vMotionv Zeroing Zeroing 容灾 基于主机IO远程同步复制 FusionStoragePool FusionStoragePool 业务I O流程 Primary站点主机下发I O写请求 Primary站点将I O写请求同步发送到Secondary站点 Secondary站点写成功 向Primary站点返回写完成 Primary站点确保Primary和Secondary站点均写成功 向主机响应写请求完成 容灾规格 RPO 0 RTO站点业务峰值写I O带宽容灾镜像卷最大规格 8T 高性能增量快照技术 快照不会引起原卷性
10、能下降 快照数据仍然基于DHT机制 快速索引无限次快照 快照元数据分布式存储 水平扩展 无集中式瓶颈 理论上可支持无限次快照 卷恢复速度快 无需数据搬迁 从快照恢复卷1S内完成 传统SAN在几小时级别 虚拟卷 读写重定向 快照1 快照2 快照3 读写重定向 读写重定向 基于快照的高性能链接克隆 克隆卷性能无损失 克隆卷基于快照技术创建 基于DHT机制 快速索引 超高性能的母卷访问 母卷缓存到内存中 性能提升3 5倍 且分布式存储 不会造成集中式瓶颈 克隆卷继承普通卷所有功能 克隆卷可支持创建快照 从快照恢复以及再次作为母卷进行克隆操作 克隆卷创建快照 克隆卷作为母卷 克隆卷 无性能下降精简配置
11、 采用分布式Hash技术 DHT环 天然支持分布式自动精简配置 ThinProvisioning 无需预先分配空间精简配置 ThinProvisioning 无任何性能下降 SAN扩展空间时需要耗费额外的性能 k1 k2 k3 kx k1 k2 k3 ky k1 k2 k3 kz Disk Disk Disk Disk Disk Disk Volume 1 Volume 2 Volume 3 kx kx kx ky kz kz 存储管理Portal 3 FusionStorage存储管理Portal概览 资源统计概览 资源统计 存储资源池信息统计 管理组件部署概览 管理组件部署 资源池 卷 块
12、客户端统计 存储资源池管理 POOL1资源详细使用说明 卷资源管理 卷IOPS 延时 带宽统计 主机资源管理 主机运行进程 状态 磁盘容量 类型描述 颜色突出故障状态 告警信息统计 告警周期选择 告警详细描述 性能统计 性能统计周期选择 统计对象选择 可以选择主机 磁盘 存储池 卷 性能统计指标选择 操作日志 周期选择和关键字索引 日志导出按钮 兼容性 4 兼容主流硬件和操作系统 X86服务器 操作系统版本 RedHatEnterpriseLinux6 2 6 4SUSELinuxEnterpriseServer11SP1 SP2 SP3OracleEnterpriseLinux6 2 虚拟化
13、平台版本 HuaweiFusionSphere3 x 5 xVmware5 0 5 1 5 5RHEL6 1KVMOpenstackG H版本 最新的FusionStorage兼容性列表请参考 FusionStorage支持的介质和网络类型 FusionStorage支持的主存介质类型SATA 使用在大容量场景NL SAS 使用在大容量场景SAS 使用在性能相对较高的场景SSD卡 使用在高性能场景SSD盘 使用在高性能场景 FusionStorage支持的网络类型 EthernetInfiniband FusionStorage支持的Cache介质类型 writeback NVDIMM 使用在
14、对时延要求极其敏感的场景 比如OLTP SSD卡 作为writebackcache 使用在对时延要求较低的场景 比如虚拟化 一般应用 SSD盘 作为writebackcache 使用在对时延要求较低的场景 比如虚拟化 一般应用 DRAM内存 作为writebackcache 当整个集群全局掉电的时候 如数据中心掉电 在内存中的cache数据丢失 从而导致系统数据丢失 所以建议仅用在测试环境中 Nocache cache关闭模式 系统变成了writethrough模式 性能会变得比较差 建议仅作为多媒体视频等大块存储场景使用 安装部署 5 硬件部署形态 FusionStorage在通用x86服务
15、器上部署分布式存储软件 把所有服务器的本地硬盘组织成一个虚拟存储资源池 提供块存储接口 典型硬件1 机架式服务器 典型硬件2 刀片式服务器 Server1 Server2 ServerN VM VM VM VM VM VM FusionStorage分布式存储资源池 HDD SSD HDD SSD HDD SSD 通用X86服务器硬件要求 备注 POC测试不受以上条件约束 FusionStorage软件模块部署图 FusionStorage支持融合部署和分离部署两种部署方式 融合部署指的是VBS和OSD部署在同一台服务器中 而分离部署则VBS和OSD分别部署在不同的服务器中 原则上虚拟化应用推
16、荐采用融合部署的方式部署 而高性能数据库应用则推荐采用分离部署的方式 FusionStorage在UVP KVM下的部署 分离部署 融合部署 VBS和OSD安装在hypervisor上 如果是UVP 则部署在Domain0上面 如果是KVM 则部署在KVMOS上面 采用UVP时 VBS模块部署在Domain0中 节点内的用户VM访问本节点Domain0VM中VBS提供的存储服务 采用KVM时 VBS模块部署在KVMOS中 节点内的用户VM访问本节点OS中VBS提供的存储服务 KVMOS安装在本服务器介质设备中 OSD模块部署在独立的存储服务器 采用HuaweiUVPOS 负责管理本服务器的PCIESSD或者SCSIController下的硬盘或者SSD盘 硬件介质 FusionStorage在VMware下的部署 Page35 融合部署 融合部署 OSD和VBS模块部署在ControllerVM中 服务器PCIESSD或者SCSIController下的硬盘或者SSD盘passthrough到ControllerVM中的OSD进行介质管理 节点内的用户VM优先访问本节点Controll
