网络中心机房清理记录

《网络中心机房清理记录》由会员分享，可在线阅读，更多相关《网络中心机房清理记录（13页珍藏版）》请在金锄头文库上搜索。

1、 网络中心机房清理记录 网络中心机房清理记录 2009 年 7 月 21 日7 月 24 日 一、 前期准备工作一、 前期准备工作 根据网络中心机房目前的实际状况，2009 年 7 月 13 日在中心办公会议上确定在暑假适当的时候对网络中心机房进行一次集中清理。 上一次中心机房清理为2007 年 10 月。 由于学校今年暑假开学时准备工作时间非常短，8 月 31 日开学，9 月 1 日新生报到，8 月下旬，网络中心将全力配合基础学院和研究生院迎新展开工作，工作必将非常紧张。充分考虑近期学校与网络相关的工作，只有本科招生工作正在同步进行，经过几次协商和沟通，7 月 20 日中心负责人与招生分配处

2、负责人最终确定工作时间，利用招分办休息的两天（7 月 21 日-7 月 22 日）时间进行机房现场清理工作，保证招生工作的顺利有序进行。 与集成商相关工作人员协调时间，备足清理机房的相关仪器设备（标签机、测线仪、吸尘器等） ，以及若干多模单模跳线备份。 与 IBM、eyou、F5、深澜、东软等合作厂商相关技术人员提前联系，保证机房清理工作完成之后，设备正式加电上线时能够获得相关技术支持。 7 月 20 日请示主管校领导批准后，通过网络公告、邮件、主要办公楼张贴公告等形式向全校师生发布机房清理公告。 明确清理程序， 通知中心主要技术人员， 按照要求， 于指定时间， 按时到岗。 二、 中心机房清理

3、目标二、 中心机房清理目标 全面整理机房，消除安全隐患。 三、 中心机房本次清理详细记录三、 中心机房本次清理详细记录 现场清理工作：2009 年 7 月 21 日 7 时2009 年 7 月 22 日 21 时 后期整理工作：2009 年 7 月 23 日 7 时2009 年 7 月 24 日 1参加现场清理的工作人员：陈朔鹰，赵敬中，唐凯，吕天兵，刘卫民，卢肖，朱丽洁，崔睿，王凤贵。 因其他事情无法到达现场，进行远程电话咨询和支持：俞宙，杨军。 前期准备：前期准备：2009 年年 7 月月 21 日日 下班时协调东软公司关闭 系统。 现场清理第一天：现场清理第一天：2009 年年 7 月

4、月 21 日日 现场值班：吕天兵，晚上值班：崔睿 7:00 技术人员开始进行准备工作。 7:20 开始逐个关闭主机房正在运行的应用系统和服务：邮件系统、计费系统、主页、数据库、磁盘阵列、IBM 刀片服务器等。 8:20 开始关闭核心交换设备，断网。 8:35 依次逐步切断主机房全部动力电源，保留两台空调继续运行，关闭专用机房空调。 图 1 中心机房北侧核心设备机柜（凌乱不堪的光纤跳线） 28:40 聘请的专业机房清理人员 10 人进入主机房现场，熟悉现场情况，领队从主交换机 6509 开始记录当前全部线路连接状态，绘制现场连接图。 图 2 中心机房东侧机柜组（散落一地的飞线） 8:40 开始关

5、闭托管服务器机房的全部托管服务器。 8:45 关闭托管机房的全部电源。 8:45 开始关闭 UPS 间的 3 台 UPS。 8:50 开始初步清理 UPS 间环境。 8:55 逐个打开 UPS 设备进行内部清洁和维护。 9:20 使用清理人员带来的笔记本和专用打印机，按照机柜的顺序开始为每个机柜和每组接线制作标签。 9:40 工人开始粘贴标签，拆下各种接线。 9:50 工人开始擦拭清理下来的接线，初步清理机器外面的浮尘。 10:00 与相关人员初步确认工作进度，技术人员逐步离开现场，主机房保留值班技术人员协助清理工作。 3图 3 技术人员正在做标签登记工作 9:50 打开 3 台 UPS 设备

6、，里面布满了尘土（UPS 房间密闭性较差所致） ，采用小毛刷、吸尘器对机器内部进行清理。 10:00 从 UPS 间拉电源至主机房为清扫设备临时供电。 4图 4 UPS 设备内部明细图 12:00 UPS 除尘结束。 13:00 主机房继续调整线路，除尘。 13:00 UPS 加电调试，两台正常，一台无法启动。 13:30 确认其中一台 UPS 存在故障，联系原厂商技术人员进行进一步诊断。 13:30 开始从配电盘向主机房拉两根电缆线，为主机房刀片服务器新增两路供电线路。 15:00 UPS 厂家 1 名技术人员到现场进行技术诊断， 检查相关的连线和电池组。 15:30 主机房拉两根电缆线安装

7、完毕，等待通电后的确认测试。 15:30 主机房继续清理机柜，更换老化网线， ，更换老化插座，重新绑扎连线。 516:30 排除 UPS 故障隐患，更换 UPS 内的控制板。 16:50 确认 3 台 UPS 工作正常。 17:00 根据当天工作进度，为保证能够在第二天下午两点对主机房加电，与清理公司经理确认晚上加班的时间和进度。 17:10 负责 UPS 维护的技术人员全部撤离现场。 18:00 工人晚饭。中心值班人员检查当天工作进度和质量。 19:00 继续清理主机房， ，将部分飞线移到地板下。 23:45 关闭主机房全部空调，切断主机房主全部电源，保留 UPS 间供电电源和空调运行。 2

8、3:45 2 名公司经理带 7 名工人结束一天工作离开机房。 第一天工作的成果：清理完成 UPS 间的设备，发现并排除 UPS 故障一处，完成主机房地上 8 个机柜的整理工作。 第一天主要工作人员：集成商相关人员经理 2 名、工人 8 名；中心主要负责领导及相关技术人员 第二天：第二天：2009 年年 7 月月 22 日日 现场值班：吕天兵 7:45 工人到达现场，开始准备工作。 8:00 在主机房继续清理工作，整理中心核心交换机 Cisco 6509 的光纤，开始清理主机房地面，清理 IBM 和 SUN 的机柜。 12:45 继续整理 Cisco 6509 的光纤，调整 IBM 和 SUN

9、机柜。 13:00 部分新增设备上架归位。 14:00 中心主要技术人员集中，电工到位，IBM 工程师到位，集成商工程师到位，做加电前的准备工作。 14:30 主机房集中了约 20 人，分别同时开始工作。 14:55 合 UPS 输出电闸，向配电柜供电，正常。 14:57 为 IBM 机器加装电源 PDU， 合上电柜电闸， 向 IBM 刀片中心四路供电，IBM 技术人员对 IBM 机器调试开始。 15:25 IBM 刀片中心硬件工作正常，操作系统正常启动，未发现明显问题。 615:35 合上主机房两路电闸，为 IPv6 等设备加电，检查单机运行状态。 15:50 依次对 IPv6 设备、校园网

10、主页、防篡改系统、监控系统等服务器加电。 16:10 供学生使用的校内邮件系统 SMAIL 启动不正常，无法马上确定故障位置快速排除，暂时关机。 16:15 为磁盘阵列加电，正常。 16:25 检查监控室电源，准备启动监控终端。 16:30 监控室启动监控终端，正常。 16:40 开始在 IBM 刀片服务器上为即将上线的新的校园网主页发布系统配置运行环境，检查网络连通，发现有一块网卡仍然工作不正常，通过交换刀片位置确定问题出在交换模块上。 17:00 检查机房环境：一半设备投入恢复运行，已经供电的 3 路电源系统正常，UPS 运行正常，2 台 5 匹空调运行，机房环境温度为 25 度。 17:

11、00 再次启动供学生使用的校内邮件系统和相关的磁盘阵列，排查问题。 17:00 机房北侧，6 名工人同时在 6509 前工作，光跳线安装过半。 17:30 工人开始对机房地板进行检查，查遗补漏。 17:40 确认提供 SMAIL 服务的服务器存在问题，当天无法恢复，停机。 17:50 开始安装 6509 的最后几根光跳线。 17:50 IBM 工程师还在对刀片服务器中的“两片”进行调试，更换备件。 18:00 检查机房环境：一半设备投入恢复运行，已经供电的 3 路电源系统正常，UPS 运行正常，2 台 5 匹空调运行，机房环境温度上升到 26.5 度。 18:40 最后两路开始合闸供电，北侧的

12、核心交换设备加电。 18:45 网络监控显示，全校部分网络设备已经连接正常。 18:50 托管服务器机房开始供电，开始启动托管服务器。 18:50 网络中心连接校园网的计算机已经连入网络。 18:55 启动小型机。 19:00 启动 DNS，启动 F5，启动计费系统，启动邮件系统。 19:00 更换空调过滤网，启动机房第三台机房专用空调。 19:06 计费系统运行。 19:08 在监控室通过 IP 可访问到校内图书馆。 719:10 开始调整线路，发现计费系统上连接 6509 和 SCE 的两根光纤分别有一路不通。 19:14 校内客户端可以登陆。 20:20 校内网络运行正常。 20:30

13、通过临时光纤飞线，连接教育网的线路开通。 20:35 通过临时光纤飞线，连接公网的线路开通。 20:42 学校主页正常开通。 21:00 检查系统各项功能是否正常。 21:30 工人再次进入机房进行地面清洁工作。 21:30 技术人员吃饭。 22:07 通过临时光纤飞线，调通本部与良乡之间的线路。 22:20 记录遗留问题，明确明天工作。 22:25 结束全天工作。 第二天工作的成果：完成了中心机房的清理工作，实现了校园网主干网络链路的畅通和主要应用服务的正常运行。 第二天主要工作人员：集成商相关人员经理 1 名、工人 8 名；中心主要负责领导及相关技术人员；IBM 技术支持人员、深澜技术人员

14、和相关集成商技术人员。 四、 中心机房清理工作完成的后续工作四、 中心机房清理工作完成的后续工作 7 月 21 日到 7 月 22 日两天的中心机房清理工作完成后，实现了中心机房的除尘清理工作，保障了校园网主干链路重要楼宇的网络畅通，恢复了学校主要应用的正常运行。 后续工作时间：2009 年 7 月 23 日至 7 月 24 日 后续工作目的：排除故障点，保证校园内所有网络节点的正常运转 第三天：第三天：2009 年年 07 月月 23 日日 现场值班：卢肖 9:00 工人进场，准备将地板的某些拼接处打磨切割，防止翘起。 89:00 工人进场，准备将散落在机房地面的若干主干多模、单模光纤对入地

15、。 9:25 出口防火墙到国际交流中心招分办的网络恢复，招分办正常工作。 9:37 目前故障节点：校医院、1 号 2 号教学楼北部平房区、留学生楼、校工厂、基建处库房、IPv6。 9:30 工人在中心机房外部空房切割地板。 10:10 工人去购买专用切割设备。 10:30 工人继续切割地板。 13:00 切割地板安装完毕，开始逐个调试故障点 13:41 留学生楼网络恢复。 13:45 校医院网络恢复。 13:50 新增加的 Eyou IPv6 测试服务器调试正常。 14:45 基建处库房网络恢复。 15:25 IPv6 恢复。 15:30 info 数字校园平台恢复()。 15:40 工程训练

16、中心（原校工厂）网络恢复。 16:30 一号二号教学楼北面平房区网络恢复。 第四天：第四天：2009 年年 07 月月 24 日日 现场值班：卢肖 10:30 二号教学楼网络恢复，目前所剩故障点：膳食处、二号教学楼北面静电实验室二层小楼。 13:30 为基础教育学院开通迎新网站和 。 14:00 部分中心技术人员再次集中，调试设备，为最后结束清理工作作好准备。 14:11 二号教学楼北面静电实验室二层小楼，网络恢复。 14:30 通过网络向全校发布机房清理结束公告，感谢大家支持。 14:35 修复校内邮件系统，连通网络，亿邮公司工程师远程登录，确认系统故障为存放用户邮件的磁盘阵列硬件出现问题，导致系统无法正常启动。该硬件问题需要在下周与 DELL 公司联系，寻求技术支持。 17:10 膳食处网络恢复。 9图 5 最后的三对光纤飞线（左侧的橙色两对和右侧的黄色一对） 图 6 中心机房北侧机柜（光纤飞线入地后） 18:00 快速更换 IBM 刀片中心交换模块， 解决新主页系统