《IBMInfoSphereCDC入门资料》由会员分享,可在线阅读,更多相关《IBMInfoSphereCDC入门资料(42页珍藏版)》请在金锄头文库上搜索。
1、IBM Infosphere CDC2008 IBM Corp2008 IBM CorpInformation Managementsoftware2008 IBM CorpInformation On DemandIBMInfosphere CDC高性能端到端数据整合方案,解决数据孤岛问题使用基于日志的变化数据获取(CDC)技术,从数据日志中捕获变化数据在多处理平台间双向整合数据易于扩展处理大数据量,而不影响重要应用的性能跨企业数据库系统进行实时数据整合-从生产系统捕获数据,而不影响性能-实时地转换,并将数据应用到目标系统业务收益:-Business intelligence-无时间窗的Re
2、al-time报表-e-Business-Web存储和后端操作的双向整合-Master Data Management-跨企业合并和分发数据-数据的冗灾)2008 IBM CorporationCDC架构Information On DemandIBM2008 IBM Corporation主要功能点数据同步数据转换多平台,多节点支持行过滤,表级复制,计算列,以及其他扩展等。Table level支持1对多,多对一以及级联同步对同步的过程可以AUDIT纠错机制支持JAVA API图形化的监控工具2008 IBM CorporationInformation On DemandIBMDataba
3、seLog-Based Change Data CaptureMonitoring andCon figurationo n o2008 IBM CorporationInformation On DemandIBM2008 IBM CorporationInformation On DemandIBMTeradata,etcc=iW主要特征:Flat filesBusiness ProcessWebServicesMessageQueue2008 IBM CorporationInformation On DemandIBM-低影响-灵活实施-支持异构平台-易于使用2008 IBM Corp
4、orationInformation On DemandIBMReplication Modes:2008 IBM CorporationInformation On DemandIBM2008 IBM CorporationInformation On DemandIBMRefresh (Full Copy)Net Change (Periodic)Continuous (Real Time) 7Replication LogDatabase TablePushEngine2008 IBM CorporationInformation On DemandIBM数据质量问题实现统一完整视图20
5、08 IBM CorporationInformation On DemandIBM2008 IBM CorporationInformation On DemandIBM数据格式的转换(如日期)多表关联2008 IBM CorporationInformation On DemandIBM2008 IBM CorporationInformation On DemandIBM数据类型的转换字段拆分汇总处理衍生数据计算字段合并记录拆分代码标准化表合并数据清洗(如去除空格)2008 IBM CorporationInformation On DemandIBM2008 IBM Corporati
6、onInformation On DemandIBM异构平台支持DATABASESSource & TargetDATABASES Target OnlyMESSAGE QUEUE SupportOPERATINGSYSTEMSHARDWARE PLATFORMSNETWORKPROTOCOLSDB2/UDBTeradataJMSOS/400IBM System iTCP/IPOracleNetezzaMQ SeriesOS/390IBM System zSybaseTIBCOAIXIBM System pMS SQL ServerWebMethodsHP-UXHP-9000PointBase
7、BEASolarisIntelMS WindowsHP AlphaLinuxSunItanium2008 IBM CorporationInformation On DemandIBM2008 IBM CorporationInformation On DemandIBM统一的管理界面2008 IBM CorporationInformation On DemandIBM易于使用基于Java的GUI,配置、管理和监控-同一屏幕内管理数据整合流程-口动映射,拖拽实现转换-事件日志、报警、统计报告Mm WeMn f 芳f K k 另V mmn nv.uumw* 尺EAVM4 一公n小十*“/如 n
8、俣4w尸*00特点 低延迟一旦提交了对源表进行的修改,并从日志中读取到这些修改,这些变化就立即发送出去。高吞吐量齢蠶蠶蹄沪发生的快速变化W程序使用多线程,使得它低网络流量消息使用一种压缩格式在队列中传送,而且在发送数据的选项中允许选择传送最少量的数 据。异步性消息队列使得App时程序可以不连接源数据库或者源子系统就可以接收事务。如果 QCapture程序或者Apply程序停止,需要进行处理的消息在程序准备好之后后,将仍然存 在于队列中。由于消息是永久的,所以源表和目标表即使在系统或设备故障的情况下仍可以2008 IBM CorporationInformation On DemandIBM20
9、08 IBM CorporationInformation On DemandIBM-基于日志2008 IBM CorporationDatzMirrorAn IBM CompanyIBM Software Group | Information Management software架构(数据源)DatzMirrorAn IBM CompanyIBM Software Group | Information Management software架构(目标端)BackupDatzMirrorAn IBM CompanyIBM Software Group | Information Mana
10、gement softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareLog-Based ReplicationDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareDatzMirrorAn IBM CompanyIBM Software
11、 Group | Information Management softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareFeature:可以读取REDO和ARCHIVE LOGBusiness Benefits:实时性,以及对原有系统影响降到最低DatzMirrorAn IBM CompanyIBM Software Group |
12、Information Management softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareDatzMirrorAn IBM CompanyIBM Software Group | Information Management software可以复制ORACLE DDL和DMLDatzMirrorAn IBM CompanyIBM Software Group | Information Management softwareTableSequenee Context Directory Dime nsion FunctionIndexLibrary Materialized View PackageTriggerProcedureProfileResource CostRoleRollback Segme nt Synonym Ta