《业务管理移动省级经营分析系统数据质量管理系统业务技术规范》由会员分享，可在线阅读，更多相关《业务管理移动省级经营分析系统数据质量管理系统业务技术规范（66页珍藏版）》请在金锄头文库上搜索。
1、中国移动通信企业标准QB-J-XXX-2007中国移动省级经营分析系统数据质量管理系统业务技术规范（征求意见稿）版本号：2.0The Business and Technical Specification on Data Quality Management System in Business Analysis Support SystemV2.02007-05实施2007-05发布中国移动通信有限公司 发布目 录1.范围12.引用标准13.术语和定义14.符号和缩略语25.概述26.总体说明26.1数据质量管理概述26.2主要内容36.3系统建设目标36.4实施建议47.数据质量管理需求
2、47.1数据质量问题47.1.1信息问题域57.1.2技术问题域67.1.3流程问题域77.1.4管理问题域87.2系统功能需求87.2.1元数据管理97.2.2数据质量监控97.2.3项目管理支撑98.系统架构98.1系统体系98.2源系统层108.2.1经营分析系统数据处理流程108.2.2数据质量监控点108.3存储层118.3.1元数据存储118.3.1.1业务元数据118.3.1.1.1业务术语118.3.1.1.2业务描述118.3.1.1.3业务指标118.3.1.1.4业务规则128.3.1.2技术元数据128.3.1.2.1数据源接口128.3.1.2.2ETL过程128.3
3、.1.2.3数据仓库和数据集市存储138.3.1.2.4分析应用138.3.1.2.5运行环境信息148.3.1.2.6质量管理过程148.3.1.3管理元数据158.3.2运行状态信息存储168.3.3质量管理知识存储168.4功能层168.4.1元数据管理168.4.1.1元数据维护178.4.1.2元数据导入/导出178.4.1.3同步检查188.4.1.4实体查询198.4.1.5过程查询198.4.1.6影响分析198.4.1.7血统分析208.4.1.8实体关联度分析208.4.1.9实体差异分析208.4.1.10版本管理208.4.1.11变更通知218.4.2质量监控支撑功能
4、218.4.3知识库管理218.4.3.1.1知识积累和维护218.4.3.1.2知识使用218.4.4系统管理218.5应用层218.5.1数据质量监控218.5.2信息地图228.5.3需求变更影响评估228.5.4数据集市支撑248.5.5项目管理支撑248.5.5.1工作分配管理248.5.5.2系统使用状况分析248.5.5.3项目需求管理248.5.5.4项目组织架构管理259.数据质量监控模块259.1概述259.2数据质量监控模块的目标259.3数据质量监控模块功能要求259.3.1数据质量监控流程259.3.2采集269.3.2.1指导原则269.3.2.2信息采集269.3
5、.3检查279.3.3.1数据质量检查基本功能279.3.3.1.1数据稽核279.3.3.1.2处理过程检查309.3.3.2数据质量检查点的部署方式309.3.4报告319.3.4.1检查结果报告基本过程319.3.4.1.1报告定义319.3.4.1.2报告生成319.3.4.1.3报告提示319.3.4.2检查结果报告的内容319.3.4.3告警管理329.3.4.3.1告警界面329.3.4.3.2告警形式329.3.4.3.3告警升级339.3.4.3.4告警恢复339.3.5处理339.3.5.1问题处理的阶段划分339.3.5.2问题隔离阶段339.3.5.3问题处理阶段349
6、.3.6总结349.3.6.1总结的类型349.3.6.2问题总结349.3.6.3阶段性总结349.4数据质量监控模块技术实现359.4.1技术实现架构359.4.2数据质量检查代理369.4.2.1目录扫描模块369.4.2.2检查规则读取模块369.4.2.3数据质量检查模块369.4.2.4检查结果生成模块369.4.2.5代理活动采集模块369.4.2.6通信模块379.4.3数据质量监控服务器379.4.3.1用户管理模块379.4.3.2检查规则处理模块379.4.3.3代理配置处理模块379.4.3.4代理活动监控模块389.4.3.5检查结果处理模块389.4.3.6数据库接
7、口模块389.4.3.7通信模块399.4.4数据质量检查客户端399.4.4.1检查规则查看399.4.4.2检查规则配置399.4.4.3代理配置399.4.4.4代理活动监控399.4.4.5检查结果查看409.4.4.6用户管理409.4.4.7通信模块409.5实施要求409.6场景描述4110.数据质量管理流程4410.1概述4410.2管理机制4410.2.1组织机构职责4410.2.1.1角色与职责4410.2.1.1.1项目负责人4410.2.1.1.2项目经理4410.2.1.1.3数据质量管理员4510.2.1.1.4业务系统接口员4510.2.1.1.5文档的设立和维护
8、4510.2.2相关外部组织4610.3质量控制流程4610.3.1需求变更控制流程4710.3.1.1流程进入条件4710.3.1.2流程产生文档4810.3.2数据质量问题处理流程4810.3.2.1流程进入条件4910.3.2.2流程产生文档4910.3.3指标口径及业务规则问题处理流程5010.3.3.1流程进入条件5110.3.3.2流程产生文档5110.3.4元数据变更维护流程5210.3.4.1流程进入条件5210.3.4.2流程产生文档5210.3.5错误数据维护流程5310.3.5.1流程进入条件5310.3.5.2流程产生文档5410.4质量检查5410.4.1管理流程检查
9、5410.4.1.1组织结构检查5410.4.1.2管理流程及相关标准的检查5510.4.1.3质量管理流程执行情况检查5510.4.2元数据质量检查5510.4.2.1及时性检查5510.4.2.2完整性检查5610.4.2.3准确性检查5611.系统管理5611.1概述5611.2系统安全管理5711.3系统版本管理5712.编制历史57VQB-J-XXX-2007前言为更好地及时获取、分析、评估和解决省级经营分析系统各环节的数据质量问题，保证数据质量的稳定可靠，需要构建一套省级经营分析系统数据质量内部控制的管理体系，利用数据质量监控模块进一步提升数据质量管理系统对经营分析系统的支撑能力，
10、特制订本规范。本标准由中国移动通信有限公司提出并归口。本标准以中移有限业【2007】XX号印发。本标准起草单位：中国移动通信有限公司。本标准主要起草人：本标准解释单位：中国移动通信有限公司。VIQB-J-XXX-2007 1. 范围 本规范包含了中国移动经营分析系统数据质量内部控制的管理体系，以及数据质量管理系统业务技术规范方面的内容。本规范适用于中国移动省级经营分析系统数据质量管理系统(v2.0)的建设。 本规范重点描述了以元数据管理为基础的数据质量监控功能，引入数据质量监控模块，并提出了数据质量全程监控的概念。旨在为数据运营打下基础，提升数据质量管理能力，使经营分析系统具有更高的实用价值。
11、2. 引用标准中国移动省级经营分析系统数据质量管理系统业务技术规范（v1.5）中国移动经营分析系统元数据管理规范V1.0中国移动省级经营分析系统数据质量控制指导意见3. 术语和定义序号名词解释1元数据是描述经营分析系统中数据的数据，为数据质量管理等业务功能提供信息支撑。2技术元数据技术元数据包含关于经营分析系统数据技术层面的信息，描述了数据源、ETL、数据仓库和数据集市、OLAP、一级经营分析系统接口等子系统的数据特征。3业务元数据业务元数据用业务术语、名称、定义来描述经营分析系统中的各种业务信息，供业务人员使用。4管理元数据管理元数据主要是指经营分析系统日常建设过程中，涉及开发、运维等管理流
12、程的基本信息。5CWMCWM标准是OMG组织定义的数据仓库和相关系统的国际元数据标准，CWM标准的目的在于使得数据仓库和商业智能软件的元数据在分布异构的数据分析工具，数据仓库平台，元数据存储等系统之间交互。6信息地图信息地图是在元数据基本功能基础上对经营分析基础元数据信息的全局、多视角的展现。7数据质量监控自动获取经营分析系统各环节的数据质量信息，结合元数据库中的有关检查规则，对数据质量情况进行诊断，并及时向数据质量监控人员报告。8数据质量监控代理(Agent)是指部署在经营分析系统数据处理流程各阶段上的，完成数据质量情况采集、检查、报告等功能的驻留程序。9数据质量监控服务器对分布式数据质量监
13、控代理进行管理和服务的程序模块。4. 符号和缩略语缩写英文描述中文描述BOSSBusiness Operation Support System业务运营支撑系统ODSOperational Data Store操作型数据存储CORBACommon Object Request Broker Architecture公共对象请求代理体系结构CORBAIDLCORBA Interface Definition LanguageCORBA接口定义语言CWMCommon Warehouse Metamodel公共仓库元模型ETLExtraction Transformation Loading抽取、转换和加载JMIJava Metadata InterfaceJava元数据接口OLAPOn-line Analysis Process在线分析处理XMIXML
