《商务智能教学课件:01 Business Intelligence》由会员分享,可在线阅读,更多相关《商务智能教学课件:01 Business Intelligence(51页珍藏版)》请在金锄头文库上搜索。
1、商务智能商务智能Business Intelligence2商务智能商务智能l课程概要l商务智能的起源l商务智能的构件l商务智能解决方案l商务智能的发展3商务智能商务智能l自我介绍l课程概要l商务智能的起源l商务智能的构件l商务智能解决方案l商务智能的发展4商务智能商务智能l课程概要l商务智能的起源l商务智能的构件l商务智能解决方案l商务智能的发展趋势5教材和参考书教材和参考书l教材l参考书6课程概要课程概要l前继课程l数据库系统原理l后继课程l数据挖掘l评分l作业占课程成绩的3040%l考试占课程成绩的6070%l考勤对课程成绩进行正负加成7商务智能商务智能l自我介绍l课程概要l商务智能的起
2、源l商务智能的构件l商务智能的发展8数据库系统的发展数据库系统的发展l1968年 IBM公司: 层次IMSl1969年 美CODASYL: 网状DBTG标准l1970年 IBM的E.F.Codd提出关系模型l20世纪70年代以层次、网状为主流l20世纪80年代关系系统逐渐代替层次与网状模型l以关系型数据库为基础,建立大量业务系统和信息系统,累计大量数据其他其他l计算平台的发展l计算能力l存储能力l网络/非网络传输能力l采集手段的发展l基于光学的采集手段l二维码l图像/视频l传感器、移动设备lRFID等910数据爆炸数据爆炸 (1/2) l至2010年,仅以Disk storage存储的数据量就
3、将达到110,000,000 terabytes1 exabyte = 1000 petabyte1 petabyte = 1000 terabyte1 terabyte = 1000 gigabyte1 gigabyte = 1000 megabyte数据爆炸数据爆炸 (2/2)lIn 2007, humankind was able to store l2.9 1020 (295 EXABYTES) optimally compressed byteslCommunicate almost 2 1021 bytesland carry out 6.4 1018 instructions p
4、er second on general-purpose computersThe Worlds Technological Capacity to Store, Communicate, and Compute InformationMartin Hilbert, Priscila Lpez 11295 EXABYTES (1/2)12/ / / /人人人人295 EXABYTES (2/2)13x315x315x315x31514数据,信息,知识数据,信息,知识lInsights and context from the mindlRequires reflection and synth
5、esislDifficult to structure, capture on machines, and transferlOften tacitlData endowed with relevance and purposelNeed consensus on meaninglHuman mediation necessarylDiscrete, objective facts about the worldlEasily structured and capturedlEasily transferred知识值链知识值链: 数据数据15知识值链知识值链: 信息信息16知识值链知识值链:
6、知识知识1718企业的新问题(什么是旧问题?)企业的新问题(什么是旧问题?)l企业决策应当源于企业和行业的真实状况,真实状况来源于真实完整的数据l如何有效将企业收集的数据转化为信息,并最终为企业决策所使用l在数据爆炸和信息贫乏的前提下,需要解决信息的l可访问性l及时性l表达格式l完整性以零售业为例以零售业为例l杂货店(数十种商品,一两位员工)l日常操作:记账本、单机版信息管理系统l决策操作:人工方式l小规模零售连锁(三五家同质零售商店)l日常操作:网络版信息管理系统l决策操作:报表、信息工人l复杂零售集团(不同地域,不同性质部门)l日常操作:各种信息管理系统、专门信息系统l决策操作:?19早期
7、解决方案早期解决方案l第一代:基于主机的查询与报表l早期的商务信息系统使用批处理应用程序为商业用户提供它们所需的信息l第一代的商务信息系统只能被诸如业务分析人员之类的熟悉数据且有相当计算机经验的人员使用l管理人员很少能够使用这些早期的系统,他们必须依靠信息提供者来解答他们的问题,并给他们所需要的信息l第二代,数据仓库l第二代信息系统应用了数据仓库技术。从而使性能有了一个飞跃l数据仓库被设计用来满足业务用户的需求,而不是每天的操作型应用l数据仓库中的信息是干净的、一致的,并且这些信息以业务用户能理解的形式储存20为何需要商务智能为何需要商务智能l许多数据仓库解决方案共同的一个缺点就是系统的开发者
8、总是专注于软件技术,而不是商业解决方案l因此,尽管他们所提供的产品能够很好地构建和访问数据仓库,但这些产品实施起来相当复杂l数据仓库产品通常很少针对特定的产业、应用领域提供解决特定的业务问题的软件包l企业所需要的是应用程序和商务解决方案,而不仅仅是技术l数据仓库解决方案的另一个问题是:人们仍然过多地关心如何建立数据仓库,而不是如何对它进行访问l许多企业似乎觉得他们只需要建立起数据仓库并为用户提供合适的工具,问题就解决了。事实上,这只是个开始而已2122商务智能(商务智能(1/4)l商务lBuying and selling; commerce; tradel智能l人工智能l图灵测试l专家系统l
9、BI的目标l决策支持(Decision-making Supporting)l改善信息访问(Information access-improving)23商务智能(商务智能(2/4)l从数据到信息,BI是将数据转换为有意义的内容的过程lBI通过把来自于不同系统的数据汇聚成一个单一的可获取的信息源数据仓库(Data Warehouse, DW)。l基于用户的要求,使用各种工具来分析数据仓库中的数据,并可视化其结果24商务智能(商务智能(3/4)l访问、钻研、分析和挖掘数据获得启发和了解,从而提供更完善和更全面考虑的决策支持Gartner Groupl商务智能是企业利用现代信息技术收集、管理和分析
10、结构化和非结构化的商务数据和信息,创造和累计商务知识和见解,改善商务决策水平,采取有效的商务行动,完善各种商务流程,提升各方面商务绩效,增强综合竞争力的智慧和能力三位一体的商务智能:管理、技术与应用25商务智能(商务智能(4/4)l商务智能系统不仅支持最新的IT技术,同时也提供了打包的应用解决方案l商务智能系统着眼于终端用户对业务数据的访问和业务数据的传送,它同时为信息提供者和信息消费者提供了支持l商务智能系统支持对所有格式商务信息的访问,而不仅仅是那些存储在数据仓库中的信息。l然而,在本课程中,我们集中关注IT技术,略过应用解决方案推荐阅读推荐阅读l企业数据的秘密:大数据时代商业规则lhtt
11、p:/ toolsIntegrative DataQuery & ReportETLMeta Data baseData modeling toolsCurrent dataHistoric dataOLAP ToolsDM ToolsData filesOthersRDBMSData SourceData acquisition Data store and management Information access30数据源数据源l商务智能体系中的所有数据均来源于数据源l数据源包括l操作型数据库l历史数据l外部数据l数据仓库中的信息l相关的数据库和数据结构l数据源存在于不同的平台,既可以是
12、格式化的也可以是非格式化的31数据仓库数据仓库 - 概要概要l数据仓库是BI的重要组成部分和数据基础l其典型工作是要对集成、清洗、聚集、预计算和查询任务所需要的大量数据进行批处理l其主要技术包括l数据提取、转换和装载(extract, translation and load,ETL)l数据管理l数据访问l元数据32数据仓库数据仓库 - ETLl数据抽取、转换和装载(ETL)的过程l辨识与主题相关的原始数据l有用的数据l开发数据抽取策略l正确和完整的数据l将原始数据转换为目标规格l将原始数据加载到预定目标区域l数据目标l原子层(Atomic layer)和集成数据l数据集市(Data mark
13、et) l操作数据存储(Operational Data Storage, ODS)l缓冲区(Staging area)33数据仓库数据仓库 - 数据管理数据管理l存储,索引和备份l不仅管理关系数据库中的数据l而且管理数据立方体( Data Cube )中的多维数据(multi-dimensional data)数据仓库数据仓库 - 数据访问数据访问l一种或多种访问数据仓库中的数据的方式l面向多种商业用户l行政管理人员l商务分析人员l操作经理l临时终端用户l其他l需要支持多种访问方式以及分析和展现工具l查询和报告工具l桌面OLAPl关系OLAPl多维OLAPl数据挖掘l基于仪表盘和基于代理技术
14、等方面的客户决策支持界面3435数据仓库数据仓库 - 元数据元数据l元数据是关于数据的数据,是如何管理数据仓库的重要数据。l描述了数据的结构、内容、编码、索引等内容l表名,系统名,索引,数据结构,编码,IDl种类l关于数据源的元数据l关于数据模型的元数据l关于数据仓库映射的元数据l关于数据仓库使用的元数据l元数据管理是针对元数据的管理,使用DBMS(关系型、对象、对象-关系)进行管理36分析和展现层分析和展现层l报表和查询l联机分析处理(OLAP)l数据统计l数据挖掘37报表和查询报表和查询l针对不同商业用户的报表和查询l尤其是非信息处理专业的商业用户l定制报表和定制查询的能力l非限定的报表和
15、查询种类38联机分析处理(联机分析处理(OLAP)l提供一种快速的、交互式的、相互融合的信息访问方式l不仅可以回答 “who?”,“what?”之类的问题, 而且可以回答“how?”,“why?”之类的问题l具有以下特点:l对数据进行多维审视的能力l精密计算能力l时间智能39OLAP的基本分析操作的基本分析操作l切片l切块l旋转l数据概括(roll up)l数据细化(drill down)40数据统计数据统计l数据统计是将数据中含有的信息概括为统计值l例如最大值、最小值、平均值等l典型的数据统计方法l关系分析l要素分析l回归分析41数据挖掘(数据挖掘(1/2)l数据挖掘就是对数据库(数据仓库)
16、中蕴涵的、未知的、非平凡的、有潜在应用价值的模式(规则)的提取l用于发掘数据中隐藏的模式l借鉴各种相关领域的理论和方法l用于发现隐藏模式的算法既可以是自动进行,也可以在人工指导下完成数据挖掘(数据挖掘(2/2)l数据挖掘方法l特征化与区分l关联规则挖掘l分类挖掘l聚类挖掘l时序和挥发性数据挖掘l异常分析ll面向的数据类型l关系型数据l事务型数据库l数据仓库l文本数据挖掘lWeb挖掘l空间数据挖掘l多媒体数据挖掘l4243商务智能商务智能l自我介绍l课程概要l商务智能的起源l商务智能的构件l商务智能解决方案l商务智能的发展44IBMlDB2 Data Warehouse Enterprise E
17、ditionl数据仓库引擎数据仓库引擎lDB2 UDB Enterprise Server Edition 通用海量并行数据仓库lDB2 UDB Data Partitioning Feature 数据分区部件lEII 与与ETLlDB2 Information Integrator Standard Edition 信息集成中间件lDB2 Warehouse Manager Standard Edition 数据仓库ETCL工具l查询和多维分析查询和多维分析lDB2 Query Patroller 基于成本的查询负载管理工具lDB2 Cube Views OLAP元数据交换工具及物化查询表生
18、成器l数据挖掘数据挖掘lDB2 Intelligent Miner Scoring 数据挖掘评分工具lDB2 Intelligent Miner Modeler 数据挖掘建模工具lDB2 Intelligent Miner Visualization 数据挖掘模型图示化工具l前端分析前端分析lIBM Office Connect Analytical/Enterprise Web Edition Excel多维分析插件lDB2 Alphablox 前端应用开发组件45OraclelOracle 业务智能企业增强版 (EE)lOracle BI Server:常见的企业业务模型和抽象层l Ora
19、cle BI Answers:即席查询和报表l Oracle BI Interactive Dashboards:高交互性信息板,用于访问业务智能和应用程序内容l Oracle BI Delivers:主动式业务活动监视和警报lOracle BI Disconnected Analytics:针对移动专业人员的完整分析功能lOracle BI Publisher(以前称为 XML Publisher):企业报表和“点对点”报表的分发lOracle BI Briefing Books:信息板页面快照,用于在离线模式下查看和共享lHyperion Interactive Reporting:直观且
20、高度互动的即席报表lHyperion SQR Production Reporting:批量生成高质量的格式化报表lHyperion Financial Reporting:图书级质量的格式化财务和管理报表lHyperion Web Analysis:基于 Web 的联机分析处理 (OLAP) 分析、演示和报告46其他其他lMicrosoftlMicrosoft SQL Server Business Intelligence (BI) platformlSQ L Server Management studio,数据库管理工具lSQL Server BI studio,商务智能解决方案工具l
21、SybaselSybase IQ解决方案 lSAPlSAP NetWeaver Business Intelligence l云平台lHIVE47商务智能商务智能l自我介绍l课程概要l商务智能的起源l商务智能的构件l商务智能解决方案l商务智能的发展48商务智能的重要地位(商务智能的重要地位(1/2)商务智能的重要地位(商务智能的重要地位(2/3)排名排名相关主题相关主题20071Business Intelligence/Data Ming20084Metadata Management20099Business Intelligence20102Advanced Analytics20115Next Generation Analytics20126Next-Generation Analytics7Big Data20136Strategic Big Data4950商务智能的重要地位(商务智能的重要地位(3/3)51商务智能的发展方向商务智能的发展方向l分布式的商务智能l插件化集成的商务智能l大众化的商务智能l战术决策的支持l个人商务智能工具l在线商务智能l在线数据挖掘l零滞后的商务智能l非结构化数据基础上的商务智能