数据仓库(Teradata)

《数据仓库(Teradata)》由会员分享，可在线阅读，更多相关《数据仓库(Teradata)（42页珍藏版）》请在金锄头文库上搜索。

1、Teradata数据仓库Dr. Zhang Jian Senior Technical Consultant TD China, Apr., 2009公司介绍NCR公司介绍 创建于1884年，120年历史 包括三大部门数据仓库事业部 / Teradata金融服务 / ATM零售服务 / POS 年收入$60+亿 全球员工33,000人 美国财富500强厂商，纽约证券交易所上市公司Teradata 公司介绍 Teradata 公司 2007年10月1日正式从NCR分拆 全球企业级数据仓库的领导企业 企业级数据仓库领导企业 数据分析解决方案 咨询服务 1999年来一直被Gartner定位在数据仓库

2、领导者象限 数据仓库行业的领导企业 全球40多个国家设有分支机构 客户覆盖全球各个行业的领导企业 2006年营业收入16亿 高性能处理技术 并行环境 速度和可扩展能力Teradata A Brief History1979Teradata Corp founded in Los Angeles, California Development begins on a massively parallel computer1982 YNET technology is patented1984 Teradata markets the first database computer DBC/101

3、2 First system purchased by Wells Fargo Bank of California1987 First public offering of stock1989 Teradata and NCR partner on next generation of DBC.1991 NCR Corporation is acquired by AT Teradata revenues at $280 million.1992 Teradata is merged into NCR.1996 AT Teradata Version 2 is released.1997 T

4、he Teradata Database becomes the industry leader in data warehousing.2000 The first 100+ Terabyte system is put into production.2002 Teradata V2R5 released 12/2002; major release including features such as PPI, roles and profiles, multi-value compression, and more.2006Teradata V2R6.2 is released; BY

5、NET V3 is available with NCR 5450/5500 systems.2007 NCR and Teradata become two separate corporations. Teradata 12.0 is released in 4th quarter.2008Teradatas first full year as new corporation; 2500/5550 systems are introduced.FORTUNE Global Rankings, July 2007全球前10大 零售商中的50%全球前10大 电信公司中的90%全球前10大 运

6、输行业公司中的60%全球前10大 航空公司中的70%全球前10大 商业银行中的50%Teradata在全球各个行业的成功案例 领先行业 银行及财务公司 政府 保险行业 制造业 零售业 电信行业 运输行业 旅行业 世界级的客户名单 接近900个客户 超过2000个系统安装业界的领导企业 (Gartner Magic Quadrant for Data Warehouse Database Management Systems)ability to executecompleteness of visionniche playersvisionariesDATAllegroGreenplumNet

7、ezzaMySQLKognitio Sand TechnologySybaseMicrosoftIBMTeradataOracleleaderschallengersAs of September 2007经典数据仓库体系架构什么是数据仓库 “A Data Warehouse is a subject-oriented, integrated, time-variant, nonvolatile collection of data in support of managements decision making process” -W.H.Inmon, 1992, Building The

8、 Data Warehouse 四点特征 面向主题 集成的（一致性） 时变性 不易失性（稳定性）What is a Data Warehouse?A Data Warehouse is a central, enterprise-wide database that contains information extracted from Operational Data Stores (ODS).Based on enterprise-wide model Can begin small but may grow large rapidly Populated by extraction/lo

9、ading data from operational systems Responds to end-user “what if” queries Can store detailed as well as summary dataOperational DataData WarehouseExamples of Access ToolsEnd UsersATMPeopleSoft Point of Service (POS)Teradata DatabaseTeradata Warehouse MinerCognos MicroStrategy 谁是我们最有价值的客户 按在网时间、消费金额

10、、收入、年龄、地域、业务规模. 按产品使用情况 (国内、国际、接线员服务、呼叫卡、全部) 在我们最好的客户中，谁最有可能流失？ 我们的基站有问题吗？ 我们可以将流失模式与用户的家庭关系或一个呼叫 频繁的基站对应起来吗？ 按欺诈类型划分的欺诈模式？ 我们的网络使用峰值占总使用的百分比？ 我们应该向谁推销新产品或服务？ 那些客户我们应该让给我们的竞争对手？ 针对一个选定的用户群体，最赢利的产品/服务组合是什么？ 吸引某一类用户的最恰当的消息、媒体、和渠道是什么？使你能够轻松回答下列业务问题Teradata电信业cLDM的商业价值技术需求 大数据量 高数据吞吐能力 高可扩展性 查询复杂度高 迅速的查

11、询响应 高并发度 7x24的支撑 直接访问 数据质量业务驱动 数据仓库应用往往需要 访问历史数据 数据仓库应用的并发度 往往更多 数据仓库应用往往不会 面向某些固定应用，而 是要满足用户随机查询 的要求 数据仓库应用的响应时 间可以比较长，往往不 会像传统的交易应用一 样要求在秒级完成DW的现状数据仓库日益成为 企业的核心业务系 统，支撑企业的关 键应用数据仓库的发展趋势及技术要求Teradata典型数据仓库系统框架企业 数据仓库 从属数据集市 业务人员 IT 用户数据导入 析取清洗 条件 剔除家庭关系 加载 知识发现 数据挖掘 信息存取工具源数据 数据 采集数据 存储/ 管理信息 访问IT

12、UsersBusiness Users业务系统 业务系统 业务数据 外部数据 关系数据库管理系统聚集 统计 人工智能 神经网络 多维 可视化 EIS/DSS 电子表 对象语言 开发 网络管理数据库管理 系统管理元数据 逻辑数据模型 物理数据库设计 数据字典业务和技术咨询与培训服务数据仓库系统的体系结构抽取 传输清洗 转换加载规划 设计营销管理分析收益情况分析业务情况分析市场竞争分析合作服务方分析客户情况分析服务质量分析客户流失预测竞争对手分析潜在大客户机线资源机线资源9797系统系统计费账务计费账务本地网系统PHSPHS结算系统结算系统省级系统数据源ETL数据存储信息展现数据准备信息访问系统用

13、户数据仓库数据仓库财务事件产品营销客户位置网络企业门户Web Portal企业领导部门经理分析人员客户经理社区经理业务主管元数据、系统管理、系统监控元数据元数据ThePost外部数据地市公司省公司加载系统数据清洗转换加载 文本文件营业97结算计费帐务其他数 据 源面向业务流程 3NF物理数据集市最终用户LDM逻辑数据模型 详细交易数据 面向主题 3NFPDM面向分析主题 汇总数据模型 Star Schema 建模 虚拟数据集市数据仓库平台通信服务器数据转换压缩/传输 文本文件 标准数据接口数据仓库系统中的数据流Teradata电信业cLDM关联 / 被关联关联 / 被关联服务通过网络实现 /网

14、络支持服务网络产生事件 /事件包括网络类服务被销售给客户 /参与人使用和管理服务财务产生事件 / 事件包含财务类参与人产生和经历事件 /事件包括参与人的产品产生事件 /事件包括产品类广告产生事件事件实现广告广告被锁定位置 /位置定位广告针对特定产品 /产品通过广告实现营销为参与人建立帐户、帐单 /记录帐户、成本和付款服务使用的财务信息 / 财务记录产品的成本和付款定位网络/网络支持的位置广告的目标针对参与人 /参与人是广告的受众包括消费者和运营商在内/ 位置定位EVENT （事件）FINANCE （财务）NETWORK （网络）OFFER （服务）ADVERTISEMENT （广告）LOCAT

15、ION （位置）PARTY （参与人）cLDM 核心主题n Party参与人在业务关系层面，跟踪所有人、商业单位、团体及其关联者，详细的关于评 分、分段、奖励、渠道、Web Site、隐私信息、特征信息等n Offer服务在消费层面，跟踪所有产品、服务，将分解神秘的产品结构分解到最低层面 ，如合同、产品结构、产品关联物、促销、购买交易、用户定购等n Network网络跟踪如何、什么时间，客户使用了一项产品或服务，并提供关于提供这些服 务的物理设备的信息n Location地址跟踪客户与通信资产的物理、地理关系，包括两个层面：地址、特征n Finance财务跟踪关于发票账户、付费账户、计费、收入、付费、成本等方面的财务信息Advertisement广告允许用户跟踪营销活动成果，支持制定营销获得战略，客户联系列表、市场 调查等Event事件跟踪与客户交互的重要活动，包括影响客户与运营商关系的内部、外部事件中央数据库OLAP服务器WEB服务器数据挖掘服务器前端展现工具胖客户端浏览器用户 瘦客户端数据挖掘 客户端应用服务器ETL服务器管理工作站核心业务系统OS 390/DB2其他业务系统NT/OracleWin2K/UNIX TeraBuilder ETL Auto ServicesFload Mload Fexport TPump Access ModuleTD Man