新老系统迁移及整合方案设计

《新老系统迁移及整合方案设计》由会员分享，可在线阅读，更多相关《新老系统迁移及整合方案设计（11页珍藏版）》请在金锄头文库上搜索。

1、1 新老系统迁移与整合方案本次总局综合业务系统是在原有系统的根底上开发完成， 因此，新旧系统间 就存在着切换的问题。另外，新开发的系统还存在与其他一些应用系统，例如， 企业信用联网应用系统、 企业登记子、 外资登记子等系统进展整合使之成为一个 相互连通的系统。本章将针对新老系统迁移和整合提出解决方案。1.1 新老系统迁移与整合需求分析系统迁移又称为系统切换，即新系统开发完成后将老系统切换到新系统上 来。系统切换得主要任务包括： 数据资源整合、 新旧系统迁移、 新系统运行监控 过程。数据资源整合包含两个步骤： 数据整理与数据转换。 数据整理就是将原系 统数据整理为系统转换程序能够识别的数据； 数

2、据转换就是将整理完成后的数据 按照一定的转换规如此转换成新系统要求的数据格式， 数据的整合是整合系统切 换的关键； 新旧系统迁移就是在数据正确转换的根底上， 制定一个切实可行的计 划，保证业务办理顺利、 平稳过渡到新系统中进展； 新系统运行监控就是在新系 统正常运转后， 还需要监控整个新系统运行的有效性和正确性， 以便与时对数据 转换过程中出现的问题进展纠正。系统整合是针对新开发的系统与保存的老系统之间的整合， 以保证新开发的 系统能与保存的老系统互动，保证业务的顺利开展。主要的任务是接口的开发。1.1.1 需要进展迁移的系统1.1.2 需要进展整合的系统需要与保存系统整合的系统包括：1、企业

3、登记管理含信用分类 ，全国企业信用联网统计分析，不冠行政区 划企业名称核准， 大屏幕触摸屏系统与企业信用联网应用， 企业登记子， 属地监 管传输，网上业务受理之间的整合；2、外资企业登记管理 含信用分类，全国外资企业监测分析与属地监管传 输，外资登记子，网上业务受理，大屏幕触摸屏系统之间的整合；3、广告监管系统与广告监管子之间的整合；4、12315数据统计分析与 12315 子之间的整合；5、通用信息查询、统计系统与数据采集转换之间的整合；1.1.3 数据迁移和转换分析根据招标文件工商总局新建系统的数据库基于 IBM DB2而原有系统的数据 库包括ORACLESQL Server，DB2这种异

4、构数据在总局主要存在于两个方面， 即部门内部的异构数据和上下级部门之间的异构数据。同时，系统的技术构件 有.NET和J2EE两大类。对于部门内部的异构数据的集成采用数据移植的方法， 如：如果数据有基于 DB2管理的，有ORACL管理的，有SQLServer管理的，就根据新系统 DB2的要 求，把ORACLE勺数据迁移到 DB2数据库中，把SQL Server的数据迁移到 DB2 数据库中。上下级国工商局之间的异构数据的集成利用数据交换系统来完成， 重点在于 数据库存储标准、 交换标准的制定和遵守， 保证数据的共享， 这局部工作由数据 中心完成。1.2 系统迁移和整合目标一、系统切换的主要目标：

5、保证系统正常运行在数据转换过程中， 由于原有的系统数据的复杂性， 给数据转换工作带来了 很大的难度， 为了在新系统启动后不影响原系统正常的业务， 因此数据转换完成 后，必须保证新系统的正常运行。保证原有系统在新系统中的独立性原有系统是独立运行的系统， 数据在新系统中虽然是集中存放的， 但是各个 系统由于存在业务上的差异，数据在逻辑上应当保持一定的独立性。二、系统整合的目标：保证直接关联的系统互动，保证业务的正常办理。例如公众服务系统与根本 业务系统之间互动，根本业务与协同业务之间互动等等。1.3系统切换方案系统切换工作流程系统切换包括前期调研、数据整理、数据转换、系统切换、运行监控五个阶段。系

6、统切换的整个工作流程如下所示：图11系统切换流程示意图132系统切换工作步骤1.3.2.1 前期调研阶段前期调研是数据转换中很重要的一个步骤，也是至关重要的一局部。在进展 数据转换工作前，我们需要先认真阅读系统的相关文档，如数据字典、系统 概要设计报告等，来熟悉原有的系统。当然在阅读文档的过程中肯定还会有理 解不清晰的地方，这时还需要熟悉原有系统的工程师的帮助。数据转换的前期工 作就是对原系统做一次彻底的全面了解，主要需要的考虑的有下面一些情况：1、原系统的网络结构；2、原系统的业务X围、存在几套业务系统以与他们之间的关系；3、原系统的开发商、开发工具、开发平台以与采用的数据库；4、原系统的数

7、据分布状况：包括数据 X围、数据量大小等；5、原系统的业务流程；6、原系统的数据流程；7、原系统的数据结构；在了解要素的根底上，需要编写前期调研分析报告 。调研报告主要包含 如下一些方面：1、将所有数据表进展分类，如系统参数类、代码类、综合业务类、相关业2、对所有数据表的数据组成、数据来源、用途等进展描述。3、并非所有的数据都是需要进展转换的，在数据字典分析报告中要指 出那些数据表是需要进展转换的， 那些是不需要进展转换的， 对于不需要转换的 表要说明不需要转换的原因。4、描述数据在各表中的流向，对于关键的或复杂的业务点要做详细说明。1.3.2.2 转换设计阶段转换设计阶段主要是完成新旧数据字

8、典的对照， 同时明确各个表中具体数据 字段的转换方式。在转换设计阶段主要是编写数据字典对照报告数据字典对照报告 主要描述新旧系统数据表间的对照关系以与代码对照 关系。以新系统为准， 原系统作参照， 将原系统的数据字典对应到相应的系统数 据字典中。在对照过程中，需要遵循数据照搬原如此，数据尽量不要作处理。在数据字典对照表中需要进展转换的数据字段应该一一对应， 对新旧数据表 中字段的名称、 类型、精度等都要有详细的描述， 同时还要明确数据的转换方式。 数据转换方式主要有以下几种：1. 直接转换。直接转换方式是最常用的方式， 就是将原表中对应字段的数据 原封不动的搬到新表中来。 按照“数据照搬原如此

9、， 我们应该应该尽量采用这 种方法。2. 程序转换。对那些需要进展计算才能进展转换的数据将采用程序转换方式 进展。3. 代码对照。某些代码字段， 往往新旧系统的编码不一样， 这时就需要参照 代码对照表进展代码对照转换4. 类型转换。少数数据 可能需要对类型进展 转换，如就表以字符串 YYYY-MM-DD来存放日期，而新表中以 DATE型来存放日期，这时就需要进展 类型转换。5. 常量转换。新表中某些字段可能存在缺省值，这时将采用常量转换方式， 当旧表没有对应字段或旧表对应字段数据为空时，将直接在新表中写入缺省数 据。6. 不转换。对于旧表有但新表中没有的字段将不作任何转换。新旧系统代码对照列出

10、了全部需要进展转换的新旧系统数据表中存在的二 级代码间的对照关系，主要以二级代码对照表的形式来反映。1.3.2.3 数据迁移一、数据整理策略 数据整理就是将原系统数据整理为系统转换程序能够识别的数据。 数据整理 大致分为两个阶段： 第一阶段就是将不同类型来源数据采集备份到统一的数据库 中；第二阶段就是将原始数据进展整理， 按照不同的要求分类进入不同的中间数 据库，为数据转换提供中间数据。数据整理过程采用了以下方法：确保原始数据的完整性在进展数据整理之间， 我们先需要对原始采集数据进展备份。 备份的目的有 两个：一个是统一数据库， 便于数据转换， 另一个就是为以后数据追根溯源提供 参考依据。在本

11、系统中，我们将采用 DB2作为备份统一数据库。数据分级过滤策略 数据分级过滤就是把数据按照不同的数据级别进展分类整理进入不同的中 间数据库中。本系统中我们把数据分为三个级别：废弃数据、待调整数据、可转 换数据。废弃数据就是该局部数据的存在对系统资源造成浪费的数据， 并且会影 响以后系统的运行。 待调整数据就是该局部数据严重影响新系统的运行， 必须进 展人工调整后，方可进展数据转换。 可转换数据就是该局部数据不需做任何处理， 根本满足数据转换的要求或者是该局部数据新系统建议调整， 但是不影响系统的 运行，可以等新系统运行后再调整，这样可以为数据转换工作节省很多时间。借助数据整理相关工具数据整理非

12、常艰巨，涉与的数据量很大，通过人工检查是不可能完成的，因 此必须编写相关的数据整理工具完成数据整理。包括数据整理工具和数据纠错工 具。数据整理工具负责将原始备份数据库中的数据进展分类进入不同的中间数据 库；数据纠错工具负责提供友好、方便的工具界面供用户方相关人员完善和纠正 错误数据。利用中间库作为桥梁由于原系统和新系统的数据库结构可能不一样， 所以米用中间库作为衔接新 旧系统数据的重要桥梁，对于建立新旧系统的对照关系很重要。 一旦业务人员对 新系统中某项转换数据存在疑问的情况下， 就可以通过中间库的关联，顺利找出 原数据。二、数据转换数据转换就是将整理后的数据，依照对照表的要求进展转换，并写入

13、到新系 统。这个过程可以通过交换系统实现。三、数据整理与转换步骤设计数据移植方案设计数据移植方案主要包括以下几个方面工作： 研究历史数据的结构、来源、 数据项定义、取值等现状，研究新旧数据库结构的差异，评估和选择数据移植的 软硬件平台、选择数据移植方法、选择数据备份和恢复策略、设计数据移植和测 试方案等。源数据库数据清理对于一个运行已久的数据库，主要存在三种数据库垃圾：数据库对象垃圾、 数据库权限垃圾、数据垃圾。数据库对象的清理不是一件容易的工作，需有认真 负责的态度，要有耐力，任何错误的清理不仅会造成前端不能运行， 而且将会造 成数据的丢失。所以清理数据库对象也许需要一个安全、 准确，可很快

14、恢复的方 法。首先要认识数据库资源，包括数据库对象，如表、数据库事件、过程、函数， 数据库结构关系，在此根底上结合运行系统，确认数据库垃圾，制定合理的垃圾清理方案，达到清理垃圾的目的主要方法是对数据库数据进展整合和分解，整合相关数据减少数据的重复， 分解数据如此可是数据团体更趋向合理，当然整合和分解要以适合新设计的数据 库结构为根底，以便简化转化程序。进展数据模拟移植根据设计的数据移植方案，建立一个模拟的数据移植环境，它既能仿际环境 又不影响实际数据，然后在数据模拟移植环境中测试数据移植的效果。数据模拟移植前也应按备份策略备份模拟数据，以便数据移植后能按恢复策 略进展恢复测试。测试数据模拟移植

15、根据设计的数据移植测试方案测试数据模拟移植，也就是检查数据模拟移植 后数据和应用软件是否正常，主要包括：数据一致性测试、应用软件执行功能测 试、性能测试、数据备份和恢复测试等。准备实施数据移植数据模拟移植测试成功后，在正式实施数据移植前还需要做好以下几个方面 工作：进展完全数据备份、确定数据移植方案、安装和配置软硬件等。正式实施数据移植按照确定的数据移植方案，正式实施数据移植。1.324数据整理和转换的关键技术对于多源异构数据库之间的数据转换，因为目标数据库的格式和约束的限制 严格，直接编写转换程序实现困难，可在原有数据库系统中编写转换程序。对于源数据库、目标数据库结构有差异的数据，建立中间过渡库，中间库在 原数据库平台中建立，但结构与目标数据库的结构一样。将源数据库转入中间库的过程是一个数据的重新组合和关联的过程， 将是转 换的中心和重点工作，需要对源数据库与新数据库的数据关系进展深入分析， 对 每一个数据库写出转换策略。非空处理：对于应该非空但实际为空的记录制定处理规如此。取值约束处理：对于有取值X围约束的字段进展规X化处理，即将转换后的 数据取值规X到该X围内主键处理：重新对中间库进展编号。 填写外键：每个数据库或多或少存在外键， 外键越多， 标明与其它库关联越 多，这样的库应后处理；反之，外键越少的库应该先处理。唯一键处理：对要求唯一的数据项主