《IBM数据仓库介绍》由会员分享，可在线阅读，更多相关《IBM数据仓库介绍（50页珍藏版）》请在金锄头文库上搜索。
1、IBM Software Group2006 IBM CorporationIBM DB2 Data Warehouse Edition V9.1简介IBM Software Group | DB2 information management software 日程 DWE v9.1 专门用于数据仓库分析的集成平台定位架构DWE 组件 DB2 UDB和DPF 数据仓库引擎 RDA 和SQL Warehousing Tool 物理建模与数据仓库构建工具 Intelligent Miner 数据库内嵌数据挖掘 Cube Views 辅助多维分析 Alphablox 强大的分析应用定制能力 Que
2、ry Patroller 数据仓库工作负载管理IBM Software Group | DB2 information management software 以及更多 abcDB2IBM ContentManagerOraclexyz异类应用程序和信息洞察行内、实 时控制板工具和应 用程序信息就是服务数据与内容业务上下文富有洞察的关系实时的：例如，在线帮助，同步的主数据 提取：例如，巴塞尔资本协议（ Basel II）、业务优化 基于各种标准：例如，XQuery, JSR170, JDBC, Web 服务 .元数据 管 理信息就是服务从基于项目转向一个灵活的体系架构(SOA)IBM Soft
3、ware Group | DB2 information management software IBM 信息管理软件提供超越传统存储库的价值 数据服务DB2、 IDS、 IMS、 Cloudscape、 U2 内容服务内容管理服务内容集成服务 信息集成服务联合服务移动服务转型服务质量服务 信息加速器主数据管理实体分析信息仓库可定制的仪表板行业数据模型随需应变提供的信息基于面向服务的架构 (SOA)IBM Software Group | DB2 information management software 信息服务主数据管理(WCC, WPC)商业智能 内容管理信息整合（WII, Data
4、stage 等等)数据管理 (DB2, Informix)信息加速器行业特定服务，模型，模式 (BDW, TDW, IIW) 虚拟化 背景相关（ context) 安全 角色 任务 基于各种标准 SQL, XQuery, JSR170, XML, Web 服务 , JDBC, UIMA数据和内容业务背景洞察联系商业智能解决方案IBM Software Group | DB2 information management software BI 软件平台 DB2 Data Warehouse EditionBI 硬件平台 Balanced Configuration UnitBI 共存体系 基于
5、 ISV 和合作伙伴的解决方案 and GSI PartnersBI 架构 BCS ModelBI 数据仓库引擎 DB2 with Database Partitioning Feature商业智能价值链IBM Software Group | DB2 information management software 数据仓库 /分析的生命周期今天全然不同的角色全然不同的工具/ 供应商封闭的分析数据=更长的部署周期What if analysis数据管理员OLAP 开发应用开发数据仓库管理架构师一致性理想各种角色协作的工具基于仓库的分析=更短的价值实现时间IBM Software Group |
6、 DB2 information management software 什么是 DB2 Data Warehouse Edition? 集成的、提供基于 DB2 数据仓库的分析功能的平台 提供构建数据挖掘和 OLAP分析的基础设施和工具 以及开发 Web的嵌入式分析应用 是消除企业分析障碍（如成本和复杂性）的工具 随需应变信息的基础架构 客户优势： 以更快的时间价值，可控制成本，实 现数据仓库为基础的分析 避免出现购买许多 BI 工具因为已经拥有了所必须的工具IBM Software Group | DB2 information management software DWE v9 概念架
7、构 集成的、供基于 DB2 数据仓库的分析使用的平台 组件化的架构 共享工具和元数据 共享运行时基础设施 基于 Web 的嵌入式分析 集成的数据建模、OLAP 、数据挖掘、仓库工具BI 平台（共享基础设施， Websphere）在线分析OLAP挖掘仓库工具Admin Console (Web)Design Studio (Eclipse)解决方案模板（ Basel II、 REDW）支持 Linux、 Unix 及 Windows 的 DB2 UDBIBM Software Group | DB2 information management software DB2 DWE 产品DWE Fe
8、ature ValueDB2 UDB ESE 数据仓库引擎DB2 UDB DPF 高度并行、可扩展性BI Design Studio 集成化的数据仓库设计平台Rational Data Architect 数据仓库物理建模DB2 SQL Warehouse Tool 数据仓库内SQL ETLDB2 Cube Views OLAP模型元数据交换、加快汇总报表查询速度DB2 Query Patroller 提高数据仓库吞吐量DB2 IM Modeling 从数据仓库中发现规律(模型)DB2 IM Scoring 在数据仓库中直接实现(实时)评分DB2 IM Visualization 将规律(模型
9、)图示化DB2 Alphablox 提供开发分析应用的组件，构建分析应用IBM Software Group | DB2 information management software 基于 Eclipse 的共享 BI Design Studio 从数据流生成的 SQL数据流控制流企业模式数据仓库项目IBM Software Group | DB2 information management software DWE Design StudioEclipseRational 数据架构SQLModel2, Server 资源管理器, 项目 资源管理器 , 物理 DB 模型SQL控制流编辑器挖
10、掘工具(Visualization, models mgt.Deployment & code gen.)数据探索工具SQL 工具(调试, 部署 , 等等.)SQL 数据流编辑器数据挖掘编辑器数据流编辑器框架OLAP工具AlphaBlox工具工具常规操作人员IBM Software Group | DB2 information management software 基于 WEB的 DWE 管理控制台 客户需要集成的、基于 Web 的 DWE 管理 价值从任何浏览器进行单点管理 DWE 9.1 中的全新功能用于 OLAP、挖掘、SQL 仓库的管理控制台基于角色的安全性利用 WebSphere
11、IBM Software Group | DB2 information management software DB2 DWE 组件 - DB2 UDB和DPF数据仓库引擎BI 平台（共享基础设施， Websphere）在线分析OLAP挖掘仓库工具Admin Console (Web)Design Studio (Eclipse)解决方案模板（ Basel II、 REDW）支持 Linux、 Unix 及 Windows 的 DB2 UDB IBM Software Group | DB2 information management software DB2 UDB引擎适合于数据仓库的技
12、术 数据仓库性能支持非共享体系结构 Share Nothing查询重写 Query Rewrite快速装载物化查询表 (MQT)复制的查询汇总表多维聚簇技术(MDC)动态位图索引 数据仓库功能支持空值和缺省值压缩 在部分应用中节省多达 50%空间集成的分析功能 OLAP汇总算子(Cube, Rollup, Grouping Sets) 和OLAP 评分功能(Ranking)Query Patroller基于查询成本的动态负载管理组件Cube Views数据仓库多维模型元数据交换工具IM Modeling, Scoring数据库内嵌数据挖掘功能评分功能 (Scoring)SMART技术IBM S
13、oftware Group | DB2 information management software Social Insurance Number Name Location123-456-789 Joe BostonTorontoPartition Key value Hashed to: 8VectorPosition0 1 2 3 4 5 6 7 8 9 10 11 12 .Node 1 2 3 1 2 3 1 2 3 1 2 3 1 .DB2 DB2 DB2分区映射表确定记录所在分区可以通过 REDISTRIBUTE工具重新分布数据的位置Hash分区和分区映射表IBM Softwa
14、re Group | DB2 information management software DB2 UDB: 优化技术 优化级别0-9 查询重写增加隐含的条件一般条件下压(pushdown)子查询该为JOIN消除不必要的 JOIN将量化的条件转化为标量子查询将OR 转为 IN将IN 转为 JOIN视图合并消除不必要的 DISTINCT 优化器扩展 减少限制 RID列表排序 Index Oring 执行计划分析 避免 Cartesian积 增强的JOIN 大小估计 非统一的分布式统计 I/O统计 对随机和顺序I/O 不同处理 锁优化 可修正的 CPU和I/O 成本估算 可更新的目录统计引擎自动
15、重写所有 SQL DML,适合团队开发 ,适合图形化工具生成的程序让程序员更加关心业务逻辑而不 是数据库引擎的工作原理和 SQL语句的写法IBM Software Group | DB2 information management software Multidimensional Clustering9在多个维上提供数据按值分片存储9减少创建索引( 包括聚簇索引) 、索引重组和索引维护的时间9插入/ 删除速度大大提高9用在查询系统和交易系统中都可以改善应用的性能没有使用 MDC时9只在一个维上聚簇 (Clustering)9聚簇无法保证 (一旦表页面中的空闲工间用完，聚簇度将会降低 )RegionYearRegionYearEast2004 01East NorthSouthWest东部2004年月记录都聚集在一起使用 MDC9保证聚簇 !9索引更小9查询相应更快9语法简单9插入和删除操作快MDCCREATE TABLE MDC1 (Date DATE, Region CHAR(4), YearAndMonth generated
