《双活数据中心技术研究方案课件》由会员分享，可在线阅读，更多相关《双活数据中心技术研究方案课件（61页珍藏版）》请在金锄头文库上搜索。
1、双活数据中心技术研究方案汇报双活数据中心研究项目组2024年7月22日汇报内容第一部分技术总体架构1第二部分系统层技术研究方案2第三部分网络层技术研究方案3第四部分技术方案总体分析4第五部分测试方案5双活/多活数据中心实现方案系统系统平台平台存储存储网络网络WebWeb应用应用数据库数据库访问访问接入接入 层层CN2 MPLS/核心网存储存储存储存储存储存储上海集电港上海集电港 上海卡园上海卡园北京稻香湖北京稻香湖自动选择处理中心自动选择处理中心自动选择处理中心自动选择处理中心WEB/WEB/应用同城负载均衡应用同城负载均衡数据库集群数据库集群/ /同城读写分离同城读写分离数据同步复制数据同步
2、复制WEB/WEB/应用异步接管应用异步接管数据异步复制数据异步复制虚拟机站点恢复虚拟机站点恢复虚拟机迁移虚拟机迁移资源动态跨中心扩张资源动态跨中心扩张虚拟阵列虚拟阵列存储同步复制存储同步复制存储异步复制存储异步复制同城裸光纤高速连接同城裸光纤高速连接构建同城大局域网构建同城大局域网异地高速专线连接异地高速专线连接网络延迟小网络延迟小InternetInternetInternet双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上海卡园上海集电港上海集电港访
3、问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次汇报内容第一部分技术总体架构1第三部分网络层技术研究方案3第五部分测试方案5第二部分系统层技术研究方案（应用、数据库、主机、存储）2第四部分技术方案总体分析4双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上
4、海卡园上海集电港上海集电港访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次WEB/应用层双活实现机制实现方式方式主机集群主机集群应用用软件集群件集群负载均衡均衡简要描述采用主机操作系统本身的集群功能实现中心内部/中心之间的双活采用应用中间件自身的集群功能实现中心内部/中心之间的双活采用负载均衡设备来实现中心内部/中心之间的双活切换时间实时切换实时切换实时切换应用程序不需要改变不需要改变不需
5、要改变增加设备/软件集群卡/高速交换机负载均衡设备可扩展性一般一般强负载分配方式动态动态动态实现方式复杂较简单简单中心内部较强较强强跨中心弱弱强WEB/应用层双活实现机制主要有三种，一是基于主机集群技术，二是基于WEB SERVER/应用中间件软件自身集群软件实现功能，三是基于负载均衡设备方式Web层应用层数据库层上海卡园上海集电港北京稻香湖城域互联城域互联站点选择服务器WEB层双活工作机制Web层应用层数据库层上海卡园上海集电港北京稻香湖WEBWEB层双活工作机制层双活工作机制城域互联城域互联站点选择服务器Web层应用层数据库层上海卡园上海集电港北京稻香湖WEBWEB层双活工作机制层双活工作
6、机制城域互联城域互联站点选择服务器Web层层应用层应用层数据库层数据库层上海卡园上海集电港北京稻香湖应用层双活工作机制应用层双活工作机制城域互联城域互联Web层应用层数据库层上海卡园上海集电港北京稻香湖应用层双活工作机制应用层双活工作机制城域互联城域互联Web层应用层数据库层上海卡园上海集电港北京稻香湖应用层双活工作机制应用层双活工作机制城域互联城域互联双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上海卡园上海集电港上海集电港访问接入层访问接入层WebWe
7、b层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次数据库层双活实现示意图跨机房的ORACLE RAC集群+VPLEX ，实现数据零丢失和数据库实时切换跨机房的数据库利用数据同步复制技术，通过应用部署实现读写分离数据库层双活实现机制主要有两种，一是基于ORACLE RAC+VPLEX，二是基于ORACLE DATAGUARD/GOLDENGATE数据库层双活实现机制-ERAC数据库层双活实现机制-ERAC数据库层双活实现机
8、制-读写分离主应用域应用域1主数据主数据库应用域2应用域k客户端1客户端2客户端kRAC Node1RAC Node2RAC Nodej备数据数据库Oracle DB ServerActive Data Guard辅助应用域应用域1应用域i镜像像库Oracle DB ServerGolden GateSharePlex存存储复制等复制等灾备灾备精算精算数据库层双活实现机制-读写分离主应用域应用域1主数据主数据库应用域2应用域k客户端1客户端2客户端kRAC Node1RAC Node2RAC Nodej数据数据库Oracle DB Server主、辅助应用域应用域1应用域i+k镜像像库Orac
9、le DB ServerGolden GateSharePlex存存储复制等复制等灾备灾备精算精算数据库层双活实现机制-读写分离主应用域应用域1主数据主数据库应用域2应用域k客户端1客户端2客户端kRAC Node1RAC Node2RAC Nodej数据数据库Oracle DB Server主、辅助应用域应用域1应用域i+k镜像像库Oracle DB Server主、辅助应用域应用域1应用域i+k数据库层双活实现机制对比实现方式方式ORACLE RAC+VPLEXORACLE RAC+VPLEXDATAGUARD/GOLDENGATEDATAGUARD/GOLDENGATE简要描述通过打通卡
10、园和集电港的二层网络和实现存储虚拟化，数据库集群得以跨越卡园和集电港两个中心，共同承担业务系统的运行，数据库实时同步，一个中心的集群存在问题，另一个中心实时接管数据库采用本地Oracle RAC，同城采用DATAGUARD同步机制，在同步的基础上通过”读写分离“实现应用双活切换时间实时切换分钟级应用程序不需要改变不需要改变增加设备/软件VPLEX设备DATAGUARD/GOLDENGATE可扩展性一般好负载分配方式动态静态实现方式较为复杂简单数据丢失无分钟级/秒级/无网络要求跨中心网络延迟要求在毫秒级以内要求打通大二层网络无要求双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用
11、层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上海卡园上海集电港上海集电港访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次系统平台层双活实现机制上海卡园上海卡园上海集电港上海集电港VirtualCenterSite RecoverySite Recovery ManagerManagerVirtualCenterSi
12、te RecoverySite Recovery ManagerManager数据存储组数据存储组阵列复制阵列复制数据存储组数据存储组HA、Vmotion等北京稻香湖北京稻香湖北京稻香湖北京稻香湖VMFSActive-ActiveESX备份代理VPLEX Metro城域互联城域互联RTT5ms卡园卡园集电港集电港AccessAnywhereLANSANSANVPLEX MetroFCVMFSActive-ActiveStorage ArrayStorage ArrayITOIVDC集中监控集中监控控制台控制台AvamarData StoreAvamarData StoreAvamar Prox
13、y VMITOI虚拟服务器Nexus 7000Nexus 7000ESXESXESX备份代理ITOI虚拟服务器ESXESXSANSANLAN备份数据复制虚机在线透明迁移虚机在线透明迁移基于VPLEX技术的虚拟机双活解决方案双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上海卡园上海集电港上海集电港访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系
14、统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次存储复制示意图利用基于存储的数据复制，可以实现灾备，但不能实现实时双活，灾备数据不能实时使用，切换时间较长。主机卷工作示意图主机主机磁盘阵列磁盘阵列磁盘阵列磁盘阵列城域互联LogicVolume上海集电港上海卡园PhysicalVolumePhysicalVolume镜像I/OI/OI/O同步距离利用基于主机的卷管理软件，实现物理卷映射为逻辑卷的方式，将两个数据中心的物理卷，映射为一个主机可见的逻辑卷。并在逻辑卷的层次，实现I/O分离。城域互联虚拟机群虚拟机群1011010110101101011010
15、110101101011010110ACKACKACKACKACKACKACKACK同步距离主机主机主机主机磁盘阵列磁盘阵列磁盘阵列磁盘阵列V-Plex Cluster-1/V-Plex Cluster-1/上海上海卡园卡园V-Plex Cluster-2/V-Plex Cluster-2/上海集上海集电港电港分布式的设备部署分布式的设备部署存储双活示意图存储双活实现机制实现方式方式主机卷复制技主机卷复制技术存存储虚虚拟化技化技术存存储复制技复制技术SANSAN网网络复制技复制技术简要描述通过安装在主机上的卷管理工具，实现存储的复制功能通过存储虚拟化技术，实现跨中心的数据库复制技术通过存储复制
16、软件实现跨中心的数据复制通过SAN网络实现数据复制技术切换时间实时实时小时级小时级应用程序不需要改变不需要改变不需要改变不需要改变增加设备/软件卷管理工具VPLEX存储复制软件SAN网络管理软件可扩展性不强强强不强存储要求不高不高存储同构SAN交换机同构性能占用主机资源，要求进行数据迁移较高，对主机和存储透明占用存储资源占用SAN网络资源数据丢失零丢失零丢失零丢失零丢失网络要求要求带宽高要求打通大二层网络，网络延迟低要求网络带宽高要求网络带宽高存储双活实现机制主要有四种：一是基于主机卷复制技术，二是基于存储虚拟化技术；三是基于存储复制技术，四是基于SAN网络复制技术汇报内容第一部分技术总体架构
17、1第二部分系统层技术研究方案2第五部分测试方案5第三部分网络层技术研究方案3第四部分技术方案总体分析4双活/多活数据中心实现层次访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层上海卡园上海卡园上海集电港上海集电港访问接入层访问接入层WebWeb层层应用层应用层数据库层数据库层存储层存储层北京稻香湖北京稻香湖网络层网络层网络层网络层网络层网络层系统平台层系统平台层系统平台层系统平台层系统平台层系统平台层虚拟中心虚拟中心虚拟服务虚拟服务虚拟资源虚拟资源虚拟层次虚拟层次扁平化网络接入网络扁平化，将
18、实现全公司业务终端的便捷网络接入和快速网络传输；将实现网络平台与业务平台松耦合的跨越，降低业务系统部署位置对用户端的影响；核心网将成为多中心网络传输平台，有效保障了多活中心的灵活部署；大大降低多活中心广域网部署复杂度和资金投入；访问接入层的双活实现机制实现方式方式传统站点站点轮询站点站点选择负载均衡均衡设备简要描述采用客户端设多个IP地址采用IP轮询方式（开发程序配合），选用适合的站点采用站点负载均衡设备，通过策略设计，使得用户访问最适合的站点切换时间 分钟级(手动策略有关)实时应用程序需要修改不需要修改，应用不变增加设备不需要增加站点负载均衡设备和DNS服务器可扩展性低高站点分配方式静态连接
19、 可根据数据中心负载，用户距离分配资源利用率低，访问资源较为固定，资源利用率不高高，可根据应用负载和距离自动分配，资源利用率高为满足双活数据中心的需求，必须使客户端的请求在多个中心进行智能选择，实现业务的连续性(性能最优/故障切换/按需连接)，实现站点选择通常有两种方式，一是传统站点轮询技术，二是站点负载均衡技术卡园数据中心卡园数据中心汇聚层汇聚层接入层接入层负载均衡设备核心网访问接入层的双活实现方案WEBAPDBWEBAPDB集电港数据中心集电港数据中心汇聚层汇聚层接入层接入层负载均衡设备WEBAPDBWEBAPDB站点选择设备站点选择设备城域互联城域互联111.51.51.51.52233
20、用户端通过公司内网DNS解析域名请求，DNS解析请求被转向站点选择设备站点选择设备探测域名所对应的多个服务器的状态，并返回最合适的服务器IP地址，以实现多数据中心间负载均衡用户访问对应的WEB/应用服务器当其中一个数据中心的WEB/应用服务器出现故障或数据中心出现故障：用户自动流量自动切换到正常数据中心的服务器，从而实现双活重点重点站点选择设备对站点选择设备对WEB/WEB/应应用服务器状态的检测用服务器状态的检测卡园数据中心卡园数据中心汇聚层汇聚层接入层接入层负载均衡设备核心网WEB/应用层双活实现方案WEBAPDBWEBAPDB集电港数据中心集电港数据中心汇聚层汇聚层接入层接入层负载均衡设
21、备WEBAPDBWEBAPDB城域互联城域互联112222用户不直接访问服务器，而是访问负载均衡设备的虚拟IP负载均衡设备探测虚IP对应的多个服务器的状态，将流量指向合适的服务器，并在业务处理过程中保持会话的一致性当其中一台WEB/应用服务器出现故障时：用户自动流量自动切换到正常的服务器，从而实现数据中心内部高可用当数据中心出现故障时：通过访问接入层策略将流量迁引至正常数据中心重点重点负载均衡设备对于会话负载均衡设备对于会话状态的保持状态的保持负载均衡设备对负载均衡设备对WEB/WEB/应应用服务器状态的检测用服务器状态的检测22网络层双活实现机制卡园卡园 集电港集电港IPIPNetworkN
22、etwork稻香湖中心稻香湖中心同步数据复制同步数据复制异步数据复制异步数据复制DWDMDWDM两地三中心多活模式下的网络互联和存储备份，需要保证IP网络的高可用性，又要保证能够满足既定RTO/RPO目标及多活要求： u大量使用Vmware虚拟化技术，需要多活中心间二层互通；u同城间同步数据复制，需满足Oracle DataGuard同步复制或ORACLE RAC+VPLEX的实际要求 ；u异地间异地数据复制技术， 需满足Oracle DataGuard/Goldengate技术的实际要求；考虑在卡园和集电港间部署DWDM设备，实现IP网、存储网的高可用；网络上通过直接二层互联或OTV技术实现
23、二层互通；在北京和上海间用SDH构建核心传输网，实现IP网络高速互通；同城网络互联方案业务主机业务主机存储存储存储存储交换机交换机FC城域波分系统可以提供丰富和大量的光纤接口，如：GE、10GE、FC等城域波分 主数据中心主数据中心光传输设备以太以太交换机交换机FC业务主机业务主机存储存储存储存储交换机交换机FC同城数据中心同城数据中心光传输设备以太以太交换机交换机FCDWDM:Dense Wavelength Division Multiplexing(DWDM:Dense Wavelength Division Multiplexing(密集型光波密集型光波复用复用) ) 服服服服务务器硬
24、件器硬件器硬件器硬件V M MV M M服服服服务务器硬件器硬件器硬件器硬件V M MV M MVMotionVMotion迁迁迁迁移移移移虚虚虚虚拟拟机机机机SANSAN、iSCSIiSCSI或或NASNAS动态迁移可在 X86架构的 VMWARE ESX上实现；在不中断服务的情况下，将VM迁移到其他的物理服务器上；可用在灾备、资源调整、服务器维护等场合；实现迁移的服务器必须在一个二层网络内，VM的GW在相同设备上；虚拟机动态迁移需要二层网络的支持虚拟机动态迁移需要二层网络的支持同城网络二层扩展需求OTVOTV虚拟化技术虚拟化技术有两个或以上的数据中心L2互联需求或者数据中心内有跨L3的L2
25、连接需求；需要尽量避免跨数据中心STP环路、优化跨数据中心扩展局域网的广播流量、对多地点的网关一致性有配套的解决方案；需要支持跨数据中心虚拟资源的自由调度；需要建立跨数据中心的服务器集群等；OTV技术不受数据中心互联介质影响；Source: IPsOTVOTVReceiver OTVOTVIP A数据中心1数据中心2生产服务器生产服务器主数据中心主数据中心同城数据中心同城数据中心Source: IPsIP AReceiver 同城网络连接示意图IP BInternetCN2 MPLS 核心网CN2 MPLS 核心网Internet集电港数据中心集电港数据中心卡园数据中心卡园数据中心DMZ路由广
26、域网路由广域网路由DMZ路由OTV服务核心交换Catalyst 6500核心交换DWDM通信系统ONS 15400生产应用汇聚交换生产应用汇聚交换同城网络连接实现方案Nexus 7000Nexus 7000DWDM异地网络连接示意图上海数据中心上海数据中心北京数据中心北京数据中心155/622M SDHFCFCFCIP隧道Source: IPsIP AIP AVLAN1VLAN1OTVOTVOTVOTVReceiReceiver ver IP BIP BVLAN1VLAN1OTVOTVOTVOTV数据中心双活/多活的实现示意图广域网Active/Active 应用服务器层Active/Stan
27、dby数据库层orActive/ActiveFor Different ApplicationActive/Active Web 层广域网运营商 A运营商 BINTERNET存储存储盘阵数据库应用Web 网络核心/汇聚/接入 存储存储存储存储Active/Standby Web 层异步数据复制Active/Standby 应用服务器层Active/Standby数据库层 上海卡园 上海集电港北京稻香湖INTERNET访问Active/Active 用户访问层Active/Active 用户访问层同步数据复制155/622M SDHDMZ 区区核心网核心网/广域网广域网LAN 区区安全管理区安全
28、管理区DMZ 区区核心网核心网/广域网广域网LAN 区区安全管理区安全管理区Internet站点选择服务路由优化站点选择服务路由优化防火墙入侵检测防火墙入侵检测DWDM统一的安全管理统一的安全管理安全事件的关联安全事件的关联CN2 MPLS 核心网集电港数据中心集电港数据中心卡园数据中心卡园数据中心双活中心安全服务部署事件收集分析和关联事件收集分析和关联站点选择服务防火墙入侵防御站点选择服务防火墙入侵防御双活中心网络路径管理DMZ 区区核心网核心网/广域网广域网网络汇聚区网络汇聚区DMZ 区区核心网核心网/广域网广域网Internet站点选择服务防火墙入侵防御站点选择服务路由优化站点选择服务路
29、由优化防火墙负载均衡防火墙入侵检测DWDMCN2 MPLS 核心网集电港数据中心集电港数据中心卡园数据中心卡园数据中心网络汇聚区网络汇聚区服务器区服务器区服务器区服务器区站点选择服务防火墙入侵防御防火墙Active/Standby二层网关路由控制站点选择负载均衡防火墙网络路径管理汇报内容第一部分技术总体架构1第二部分系统层技术研究方案2第三部分网络层技术研究方案3第四部分技术方案总体分析4第五部分测试方案5相关技术总结应用部署的物理位置对用户透明，支持按既定策略将用户请求指向合适的数据中心；应用在数据中心之间的迁移、单应用的故障不影响用户的业务访问。支持主机的集群和负载分担；提供资源部署、管理
30、和监控工具；支持虚拟机资源在数据中心间的迁移和恢复。实现Oracle、SQL Server数据库同城和异地数据的完整性；在技术得以验证的前提下，实现卡园和集电港数据库双活（同时读写）。流量分流: DNS，RHI，LISP技术服务器负载均衡： LTM/ACE L4-L7数据库集群：Oracle RAC(Ext RAC)Oracle数据复制：Oracle Data Guard异构数据库数据复制：Oracle GoldenGateSharePlex 支持卡园、集电港数据中心高速、高带宽互联；按需支持数据中心间存储扩展、局域网扩展、虚机漂移；支持服务器负载均衡。主机集群技术虚拟机管理：Vdirecto
31、r, Vcenter 虚拟机资源调度：Vmotion, SRM云服务管理平台：直真节点、Tidal 支持IP网与 SAN网络的互联；支持存储虚拟化；支持数据中心间数据复制和同步。存储虚拟化： EMC Vplex, HDS, LVM,SVC 远程数据复制：SRDF、HUR数据中心互联： DWDM二层打通： OTV、Fabric Path 服务器负载均衡实现难点流量分流: DNS，RHI，LISP站点负载均衡：GTM/GSSHost: ClusterX86 VMware : Vmotion,SRM卷复制VCS、VVR DNS GSS 等站点选择IP 流量的分担技术：RHI,LISP 服务器负载分担
32、： LTM/ACE减少STP环路：VPC/VDC,FabricPathL2打通：OTV Oracle RAC(Ext RAC)Oracle Data GuardGoldenGateSharePlex Dense Wave DivisionMultiplexing (DWDM)相关技术相关技术 OPERATIONAL CONTINUITY SAN&NAS 复制技术：VPLEX,SRDF，HUR，FCIP，SVC双活技术难点双活技术难点如何实现数据同步和双活？VPLEX、RACSHARE78国际标准GB/T 209882007信息系统灾难恢复规范安全级应用类型应用类型Tier-0无异地备份数据1级
33、基本级。备份介质场外存，安全保管、定期验证一级风险管理类系统等Tier-1有数据备份，无备用系统Tier-2有数据备份，有备用系统2级备份场地支持。网络和业务处理系统可在预定时间内调配到备份中心Tier-3电子链接3级电子传输和部分设备支持。灾备中心配备部分业务处理和网络设备，具备部分通讯链路Tier-4使用快照技术拷贝数据4级电子传输和完整设备支持。数据定时批量传送，网络/系统始终就绪。温备中心模式。二级外围系统、公共服务类系统、销售管类和支持类系统等、客户服务类系统等Tier-5交易的完整性5级实时数据传输及完整设备支持。采用远程复制技术，实现数据实时复制，网络具备自动或集中切换能力，业务
34、处理系统就绪或运行中。Tier-6少量或无数据丢失6级数据零丢失和远程集群支持。数据实时备份，零丢失，系统/应用远程集群，可自动切换，用户同时接入主备中心三级、部分二级系统CBPS8、短险系统、投连万能系统、团体年金系统、再保险系统、集团老业务系统、ERP、网银、OA邮件、电子商务等应用系统分级核心系统采用读写分离、非核心系统虚拟化，存储不虚拟化。核心系统、核心系统、UNIX应用技术方案应用技术方案非核心系统、非核心系统、X86平台应用平台应用综合方案一硬件软件测算依据1、网络不增加不增加2、主机不增加需增加DataGuard软件3、存储不增加存储，增加不超过1倍的SAN交换机不增加4、其它不
35、增加不增加成本分析主要依据是与原有的两地三中心方案做对比，分析需要增加的成本核心系统、核心系统、UNIX应用需增加的成本应用需增加的成本1、网络需要4台Nexus 7000、4台以上负载均衡设备配置OTV等功能2、主机增加67%-75%的主机增加相应主机上部署的虚拟机软件假定不考虑高可用，所用主机为N台，考虑进行高可用部署时，所用主机为1.2N台。未来采取“生产+同城灾备”模式，卡园承担生产职责，部署1.2N台主机；集电港承担同城灾备职责，部署0.8N-0.9N台主机；则两站点共需主机2N-2.1N台，相应增加67%-75%。3、存储不增加不增加4、其它不增加增加虚拟化灾备管理软件非核心系统、
36、非核心系统、X86平台应用需增加的成本平台应用需增加的成本综合方案一成本分析核心系统采用Extended RAC、非核心系统虚拟化，存储虚拟化。核心系统、核心系统、UNIX应用技术方案应用技术方案非核心系统、非核心系统、X86平台应用平台应用综合方案二核心系统、核心系统、UNIX应用需增加的成本应用需增加的成本非核心系统、非核心系统、X86平台应用需增加的成本平台应用需增加的成本硬件软件测算依据1、网络需要4台Nexus 7000、4台以上负载均衡设备配置OTV等功能2、主机增加7%-20%的主机增加相应主机上部署的oracle DB、Extended RAC软件假定不考虑高可用，所用主机为N
37、台，目前采取2备1的方式进行高可用部署，因此所用主机为1.5N台。未来采取“双活”模式，卡园与集电港进行负载均衡部署，考虑单站点接管情况下，仅承担0.8-0.9倍的业务压力，则两站点共需主机1.6N-1.8N台，相应增加7%-20%。3、存储不增加存储，增加不超过1倍的SAN交换机不增加4、其它增加VPLEX设备增加VPLEX设备上的软件硬件软件测算依据1、网络2、主机增加33%-50%的主机增加相应主机上部署的虚拟机软件假定不考虑高可用，所用主机为N台，考虑进行高可用部署时，所用主机为1.2N台。未来采取“双活”模式，卡园与集电港进行负载均衡部署，考虑单站点接管情况下，仅承担0.8-0.9倍
38、的业务压力，则两站点共需主机1.6N-1.8N台，相应增加30%-50%。3、存储存储有所增加，增加不超过1倍的SAN交换机不增加4、其它增加VPLEX设备增加VPLEX设备上的软件综合方案二成本分析核心系统采用读写分离、非核心系统虚拟化，非核心存储虚拟化。核心系统、核心系统、UNIX应用技术方案应用技术方案非核心系统、非核心系统、X86平台应用平台应用综合方案三核心系统、核心系统、UNIX应用需增加的成本应用需增加的成本非核心系统、非核心系统、X86平台应用需增加的成本平台应用需增加的成本硬件软件测算依据1、网络需要4台Nexus 7000、4台以上负载均衡设备配置OTV等功能2、主机增加3
39、3%-50%的主机增加相应主机上部署的虚拟机软件假定不考虑高可用，所用主机为N台，考虑进行高可用部署时，所用主机为1.2N台。未来采取“双活”模式，卡园与集电港进行负载均衡部署，考虑单站点接管情况下，仅承担0.8-0.9倍的业务压力，则两站点共需主机1.6N-1.8N台，相应增加30%-50%。3、存储存储有所增加，增加不超过1倍的SAN交换机不增加4、其它增加VPLEX设备增加VPLEX设备上的软件综合方案三成本分析硬件软件测算依据1、网络不增加不增加2、主机不增加需增加DataGuard软件3、存储不增加存储，增加不超过1倍的SAN交换机不增加4、其它不增加不增加汇报内容第一部分技术总体架
40、构1第二部分系统层技术研究方案2第三部分网络层技术研究方案3第五部分测试方案5第四部分技术方案总体分析4技术测试方案基于双活规划设计，模拟卡园和集电港基础架构环境，验证关键技术要点，并评估整体方案的可行性，包括： 1. 整体架构的可行性； 2.实现跨机房的虚拟资源灵活调度、统一管理，提供基础架构云服务； 3.实现对用户透明的应用服务负载均衡； 4.异常运行状态下，实现对用户透明的快速应用服务切换：包括接入层、应用层、数据库层、存储层、网络层等； 5.对各类相关技术进行功能性测试。基于测试结果，进一步明确未来卡园和集电港双活实现目标；通过测试，发现规划设计中存在的问题与不足，并对设计规划进行相应
41、的调整；通过测试，识别双活中心实施和管理中可能存在的技术风险，作为后续实施计划和运维方案设计的参考；在测试过程中，帮助运维管理人员熟悉新引入的解决方案和设备配置方法。测试目标测试目标测试场地：北京朝阳门机房测试时间：2011年10-11月测试人员：中国人寿双活研究项目组主导，相关厂商参与，包括：思科、HP、EMC、Vmware、Oracle、HDS、F5、 Quest、博科、IBM等 测试部署测试部署模拟卡园模拟卡园模拟集电港模拟集电港模拟远程节点模拟远程节点存储存储MDSMDSGSSGSSDWDMONSONS应用终端应用终端 * 2ISR2800Cat3750N7KN7KACETUXEDO应
42、用服务器应用服务器存储存储VPlexWeb 服务器服务器应用与应用与SQL数据库数据库服务器（基于虚拟机）服务器（基于虚拟机）Web 服务器服务器应用与应用与SQL数据库数据库服务器（基于虚拟机）服务器（基于虚拟机）TUXEDO应用服务器应用服务器Oracle RAC服务器服务器 * 2终端终端服务器服务器管理服务器（管理服务器（ITOI）AvamarAvamarISR2800VPlexOracle RAC服务器服务器 * 2终端终端服务器服务器ASAACEASAN7KN7K模拟核心网模拟核心网仲裁服务器仲裁服务器ISR2800以太网以太网FC测试环境逻辑拓扑网网络设备思科设备：2*ONS15
43、454、2*N7000、2*ACE、2*GSS、2*ASA、3*router ISR3845、 1*Switch Catalyst 3750 ；F5设备：2*GTM、2*LTM主机主机设备HP安腾刀片8*BL8900；X86刀片8片存存储设备思科、博科交换机：2*MDS存储：2*EMC Vplex Metro，EMC、HDS存储软件件Oracle：Oracle RAC、Extended RAC、Active DataGuard、GoldenGateVmware： ESX Server、 vCenter、vRanger Pro、vFoglight、vCloud Director、Site Rec
44、overy ManagerQuest：SharePlex其他其他测试设备清单4） 15) 网络容错测试网络容错测试：当单数据中心核心交换或互联设备故障时，用户操作可正常进行14） VplexVplex容错测试容错测试：当Vplex/存储交换机/存储阵列发生设备级别单点故障时，用户操作可正常进行）VplexVplex存储虚拟化测试存储虚拟化测试：可实现跨站点的数据镜像，并成功封装数据）VplexVplex存储回切测试存储回切测试：可解除Vplex数据封装而无数据丢失13） Vmware SRMVmware SRM功能测试功能测试：可实现站点级虚拟应用的迁移恢复）VCenterVCenter功能测
45、试功能测试：可统一管理两站点虚拟资源的增加、删除和修改）VMotionVMotion功能测试功能测试：可实现跨数据中心的虚拟机迁移）Extended RACExtended RAC功能测试功能测试：可利用实现跨数据中心的数据库同步读写（Vplex环境下）DataguardDataguard功能测试功能测试：可实现跨数据中心的数据库读写分离级双活（非Vplex环境下）站点选择功能测试站点选择功能测试：用户可基于IP或DNS访问卡园和集电港的应用服务（访问路径符合预设的站点选择策略）正常状态正常状态异常状态异常状态10）站点选择站点选择/ /负载均衡容错测试：负载均衡容错测试：当单数据中心的前置/
46、Web服务不可及时，用户可正常进行业务操作11）Extended RACExtended RAC容错测试容错测试：部分Oracle实例/单节点故障时，用户可正常进行业务操作12）DataguardDataguard功能测试功能测试：单Oracle节点故障，可通过主备切换/回切以持续业务操作）OTVOTV功能测试功能测试：可实现跨数据中心的局域网扩展）DWDMDWDM功能功能测试测试：可实现两数据中心IP、存储互联测试项目测试计划工作内容10.81410.172110.242810.3111.411.711.2511.2511.301. 测试设备到货、上架2. 服务器、存储、应用准备3. 网络环境搭建与联通测试 （项目13)4. EMC Vplex配置与联通测试 (项目4)5. VMWare测试（项目57)6. Oracle Extended RAC测试（项目8)7. 读写同步情景容错测试（项目12)8. Oracle Active Dataguard测试（项目1314)9. 读写分离情景容错测试 (项目1517)10. 测试报告汇报完毕谢谢谢谢
