《磁盘阵列故障紧急预案修改》由会员分享，可在线阅读，更多相关《磁盘阵列故障紧急预案修改（24页珍藏版）》请在金锄头文库上搜索。
1、磁盘阵列故障紧急预案大唐电信科技股份有限公司2006年第一版发布时间:2006年8月 DATANG 2006. 大唐电信科技股份有限公司版权所有，保留一切权利。未经大唐电信科技股份有限公司书面许可，不得以任何形式或手段使用或复制本说明书的任一部分。本说明书内容若有变动，恕不另行通知。2006年8月16日目 录第一章 综述1第二章OMC磁盘阵列紧急预案22.1 紧急预案的实施说明22.2 OMC数据备份22.3 盘阵损坏后的操作32.3.1 临时回复操作32.3.2 盘阵修复后的操作42.4 OMC数据说明6第三章HLR磁盘阵列紧急预案83.1 紧急预案的实施说明83.2 HLR数据备份83.2
2、.1 现网版本备份83.2.2 多局组网版本备份103.3 磁盘阵列故障紧急预案123.3.1 磁盘阵列软件故障时恢复数据库123.3.2 磁盘阵列硬件故障时恢复数据库123.3.3 磁盘阵列恢复后程序启动133.3.4 用户数据的恢复133.4 紧急预案的补充说明143.4.1 公单数据恢复143.4.2 系统故障恢复方案14第四章NETPLUS磁盘阵列紧急预案154.1 紧急预案的实施说明154.2 Netplus数据备份154.2.1 备份数据库的所有数据文件154.2.2 备份数据库表164.3 Netplus系统数据恢复174.3.1 磁盘阵列出现故障现象174.3.2 系统数据恢复
3、17第一章 综述磁盘阵列是OMC系统、HLR系统和Netplus系统的一个组成部分，也是系统运行中比较容易出现故障的一个物理媒介，为了保证在磁盘阵列出现故障的时候，能够进行紧急恢复，特编写本手册，供工程维护人员参考。本手册分三个主要部分，分别描述了OMC、HLR和Netplus系统正常运行时的备份工作，以及磁盘阵列出现故障时的紧急处理方法。第二章 OMC磁盘阵列紧急预案2.1 紧急预案的实施说明OMC盘阵损坏是比较常见的故障，为防止因盘阵损坏而导致OMC系统业务中断的可能，需对OMC先做备份操作，并在系统出现故障后，实施临时回复操作和盘阵修复后的操作，以恢复OMC系统的业务。注意：有些地区的双
4、机软件为RoseHA，则需注意，其/back、/user两个文件并不是盘阵的挂载点，盘阵只挂载了一个分区在/opt/sybase-12.5目录下，/back、/user是两个软连接，连接在盘阵分区的两个目录下，以下描述中，如遇RoseHA的地方，以红色字体标明2.2 OMC数据备份以下操作在两侧处理机都以root身份执行1执行df h指令，确定本地磁盘上剩余空间的大小；2如果空间足够大可将数据库及执行程序都进行备份，如果空间不够对数据库进行备份，则只能备份执行程序目录。对数据库执行一次备份操作就可以了，对于执行程序，要求每次更换程序成功后都执行备份操作，并将前次备份的目录删除；1）mkdir
5、/restore2）cp -r /user /restore/user_bakYYYYMMDD YYYYMMDD:填当日日期 如果是RoseHa局，则执行的是如下操作 mkdir /restore/user_bakYYYYMMDD cp -r /user/* /restore/user_bakYYYYMMDD/3）cp -r /opt/sybase-12.5 /restore/sybase-12.5_bak3该操作仅在主用侧服务器执行，执行以下指令，记录下IP地址的分配情况1）/sbin/ifconfig /restore/iptable 2）通过ftp方式将主用侧restore目录下ipta
6、ble文件拷贝到备用侧处理机的restore目录下保存2.3 盘阵损坏后的操作2.3.1 临时恢复操作1当盘阵故障后，两侧服务器的HA软件都应是停止状态，但为了安全起见，可执行如下操作：1）将HA软件停止2）在两侧服务器均执行以下操作：service cluster stop 2在两侧服务器中，任选一台，执行恢复操作，在盘阵恢复以前只能单机工作。3检查不执行恢复操作的服务器上是否有浮动IP，如果有DOWN掉浮动IP。4在执行恢复操作的服务器上执行如下操作1）删除盘阵挂载点，服务器中的 /back 、/user 目录是提供给盘阵的挂载点，将以下两个目录删除 rm -r /back rm -r /
7、user如果是RoseHA的局，则将/back、/user两个软连接改名 mv /back /back_softbak mv /user /user_softbak2）cp r /restore/user_bakYYYYMMDD /user3）mkdir /back 4）如果有数据库的备份则执行如下操作 rm -r /opt/sybase-12.5 cp -r /restor/sybase-12.5_bak /opt/sybase-12.5 chown -R sybase:sybase /opt/sybase-12.55）检查 /restore目录下的iptable文件，按照文件内容在网卡上浮
8、动IP地址，以下的指令举例在eth0上浮动出200.200.200.253的地址 /sbin/ifconfig eth0:1 200.200.200.253 up5至此OMC已经可以恢复运行，执行如下指令 service sybase start 约一分钟后 /user/super/load/monitor.sh start &注意：按这种方式修复的数据库，由于种种原因，数据库可能不正常，如果不正常则与数据库相关的dbman、traffic、almdeal进程不能正常运行，只能等盘阵修复后，重新安装数据库解决，以上程序不能运行仅对话务统计告警功能造成影响，对操作维护没有影响。2.3.2 盘阵修
9、复后的操作1盘阵修复后，需按OMC调机手册对盘阵进行分区及格式化的操作2停止程序的运行1）/user/super/load/monitor.sh stop2）/user/super/load/loadall stop3删除 /back目录下的内容1）、rm -rf /back/*如果是RoseHa局，则是将/back目录删除rm -rf /back将备份的软连接改名mv /back_softbak /back4 删除 /restore目录下user目录的旧备份，并将user目录移动到 /restore目录下备份1）rm -rf /restore/user_bakYYYYMMDD 删除旧的备份目
10、录2）mv -rf /user /restore/user_bakYYYYMMDD 建立新的备份3）mkdir /user 重新建立 /user 目录做为盘阵挂载点4）mount /dev/sdb5 /user 将盘阵分区挂载到/user目录下5）cp -r /restore/ user_bakYYYYMMDD/* /user/ 将备份的程序拷贝到盘阵上 以上操作如果是在RoseHA局，则按以下步骤执行1）rm -rf /restore/user_bakYYYYMMDD 删除旧的备份目录2）mkdir /restore/user_bakYYYYMMDD 建立新的备份目录3）cp -r /use
11、r/* /restore/ user_bakYYYYMMDD/ 在新建的备份目录中拷入执行程序4）将备份的软连接改名 mv /user_sofrbak /user5如果对数据库做了备份，并且数据库正在运行中，则执行以下指令 1）service sybase stop 停止数据库运行 2）rm rf /opt/sybase-12.5/* 删除/opt/sybase-12.5目录下所有文件，该目录将做为盘阵的挂载点 3）mount /dev/sdb3 /opt/sybase-12.5 挂载盘阵 4）cp -r /restore/sybase-12.5_bak/* /opt/sybase-12.5/
12、5）chown R sybase:sybase /opt/sybase-12.56）如果是RoseHA局，还需按照/user，/back两个软连接指向的目标地址在盘阵上建立相应的目标目录，执行cd /user ，cd /back两条指令，确保能进入到盘阵的相应目录下7） cp -r /restore/user_bakYYYYMMDD/* /user 将备份的程序拷贝到盘阵上6如果之前没有对数据库做备份或备份的数据库不正常，则只能按OMC的调机手册，重新安装sybase数据库，重装前需先将以前装入的安装包删除，否则安装不上，执行以下指令删除。重装数据库的操作，在一侧服务器执行即可。rpm e s
13、ybase-esql-12.5-3rpm e sybase-sqlremote-7.0.2-1rpm e sybase-openclient-12.5-3rpm e sybase-efts-12.5.0.1-1rpm e sybase-chinese-12.5.0.1-1rpm e sybase-ase-12.5.0.1-1rpm e sybase-common-12.5.0.1-1如果是RoseHA局，重新安装完数据库后，还需按照/user，/back两个软连接指向的目标地址在盘阵上建立相应的目标目录，执行cd /user ，cd /back两条指令，确保能进入到盘阵的相应目录下，执行以下指令将备份的程序拷贝到盘阵上cp -r /restore/user_bakYYYYMMDD/* /user 7完成以上操作后，则OMC恢复完成，umount所有的盘阵分区，down掉所有的浮动IP地址，用HA软件将系统重新运行2.4 OMC数据说明/user/super/data/ff目录下保存了计费设置信息及通话数据；/user/super/data/ff/crd目录下保存了每天的crd文件，三个月删除；/user/super/data/ff/ftp 目录下保存了每天的计次，计费文件，三个月删除；/user/super/data/ff/f
