《大数据引领我们走向数据智能化时代》由会员分享，可在线阅读，更多相关《大数据引领我们走向数据智能化时代（29页珍藏版）》请在金锄头文库上搜索。
1、大数据引领我们走向数据智能化时代大数据引领我们走向数据智能化时代大数据引领我们走向数据智能化时代大数据引领我们走向数据智能化时代BigDataBigDataBigDataBigData专题报告专题报告专题报告专题报告MSNMSNMSNMSN：18616553280186165532801861655328018616553280 SAC SAC SAC SAC执业编号：执业编号：执业编号：执业编号：S113051103000S113051103000S113051103000S1130511030002 2 2 2 主要内容主要内容主要内容主要内容什么是大数据？海量非结构化数据本身什么是大数据
2、？海量非结构化数据本身什么是大数据？海量非结构化数据本身什么是大数据？海量非结构化数据本身+ + + +处理方法处理方法处理方法处理方法大数据为什么重要？决定了企业是否有未来和业务可延伸范围大数据为什么重要？决定了企业是否有未来和业务可延伸范围大数据为什么重要？决定了企业是否有未来和业务可延伸范围大数据为什么重要？决定了企业是否有未来和业务可延伸范围国外处于什么样的一个情况？万马奔腾，抢占大数据高地国外处于什么样的一个情况？万马奔腾，抢占大数据高地国外处于什么样的一个情况？万马奔腾，抢占大数据高地国外处于什么样的一个情况？万马奔腾，抢占大数据高地大数据由哪些方面组成？技术、改造、数据提供商、展
3、现方式大数据由哪些方面组成？技术、改造、数据提供商、展现方式大数据由哪些方面组成？技术、改造、数据提供商、展现方式大数据由哪些方面组成？技术、改造、数据提供商、展现方式大数据在中国的机遇？投资重点、规模巨大、长期大数据在中国的机遇？投资重点、规模巨大、长期大数据在中国的机遇？投资重点、规模巨大、长期大数据在中国的机遇？投资重点、规模巨大、长期大数据专题可能的演进路径大数据专题可能的演进路径大数据专题可能的演进路径大数据专题可能的演进路径相关投资标的相关投资标的相关投资标的相关投资标的 什么是大数据？什么是大数据？什么是大数据？什么是大数据？海量数据本身海量数据本身海量数据本身海量数据本身+ +
4、处理方法处理方法处理方法处理方法指数型增长的海量数据指数型增长的海量数据指数型增长的海量数据指数型增长的海量数据所有研究都表明，未来数年数据量会呈现指数增长。根据麦肯锡全球研究院（所有研究都表明，未来数年数据量会呈现指数增长。根据麦肯锡全球研究院（MGI）估计，全）估计，全球企业球企业2010年在硬盘上存储了超过年在硬盘上存储了超过7EB（1EB等于等于10亿亿GB）的新数据，而消费者在）的新数据，而消费者在PC和笔记和笔记本等设备上存储了超过本等设备上存储了超过6EB新数据。新数据。1EB数据相当于美国国会图书馆中存储的数据的数据相当于美国国会图书馆中存储的数据的4000多倍。多倍。事实上，
5、我们如今产生如此多的数据，以至于根本不可能全部存储下来。例如，医疗卫生提供事实上，我们如今产生如此多的数据，以至于根本不可能全部存储下来。例如，医疗卫生提供商会处理掉他们所产生的商会处理掉他们所产生的90%的数据（比如手术过程中产生的几乎所有实时视频图像）。的数据（比如手术过程中产生的几乎所有实时视频图像）。存储、分类、统计、建模、预测存储、分类、统计、建模、预测存储、分类、统计、建模、预测存储、分类、统计、建模、预测的技术手段的技术手段的技术手段的技术手段能够在不同的数据类型中，进行交叉分析的技术，是大数据的核心技术之一。语义分析技术、能够在不同的数据类型中，进行交叉分析的技术，是大数据的核
6、心技术之一。语义分析技术、图文转换技术、模式识别技术、地理信息技术等等，都在大数据分析时获得应用。图文转换技术、模式识别技术、地理信息技术等等，都在大数据分析时获得应用。 大数据为什么重要？决定企业大数据为什么重要？决定企业大数据为什么重要？决定企业大数据为什么重要？决定企业是否有未来、业务可延伸范围是否有未来、业务可延伸范围是否有未来、业务可延伸范围是否有未来、业务可延伸范围更高一层数据层面整合企业内外部更高一层数据层面整合企业内外部更高一层数据层面整合企业内外部更高一层数据层面整合企业内外部挖掘内心需求挖掘内心需求挖掘内心需求挖掘内心需求经过大数据改造的经过大数据改造的IT不再是一个冷冰冰
7、的系统，而变成了推动业务发展，挖掘不再是一个冷冰冰的系统，而变成了推动业务发展，挖掘客户内心需求的真正推动剂；大数据将催生更多的应用领域需求。客户内心需求的真正推动剂；大数据将催生更多的应用领域需求。产生新的用户量、给用户产生行为指纹产生新的用户量、给用户产生行为指纹产生新的用户量、给用户产生行为指纹产生新的用户量、给用户产生行为指纹用户在线的每一次点击，每一次评论，每一个视频点播，就是大数据的典型来源。互联网用户在线的每一次点击，每一次评论，每一个视频点播，就是大数据的典型来源。互联网企业之所以取得令人瞩目的成绩，其核心的本质就是包括用户网络操作的大数据，进行记企业之所以取得令人瞩目的成绩，
8、其核心的本质就是包括用户网络操作的大数据，进行记录和分析，形成用户录和分析，形成用户“行为指纹行为指纹”，从而洞悉用户的潜在的、真实的需求，形成预判。这，从而洞悉用户的潜在的、真实的需求，形成预判。这是传统企业花费重金都难以企及的梦想。所有传统的产品公司都只能沦为这种新型用户平是传统企业花费重金都难以企及的梦想。所有传统的产品公司都只能沦为这种新型用户平台级公司的附庸。台级公司的附庸。 国外什么情况？万马奔腾，抢国外什么情况？万马奔腾，抢国外什么情况？万马奔腾，抢国外什么情况？万马奔腾，抢占大数据高地占大数据高地占大数据高地占大数据高地衍生于亚马逊、衍生于亚马逊、衍生于亚马逊、衍生于亚马逊、G
9、oogleGoogle等互联网公司等互联网公司等互联网公司等互联网公司前瞻来看，随着互联网对网民的理解，网民对网络的反作用，互联网将变得越来越智能。前瞻来看，随着互联网对网民的理解，网民对网络的反作用，互联网将变得越来越智能。它在满足你需求的同时，也在创造新的需求。前者的代表是它在满足你需求的同时，也在创造新的需求。前者的代表是Google，后者的典型则是，后者的典型则是Facebook。谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时，把个人的谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时，把个人的行为、喜好等信息也免费的送给了行为、喜好等信息也免费
10、的送给了Google。因此。因此Google的产品线越丰富，他对用户的理的产品线越丰富，他对用户的理解就越深入，他的广告就越精准。广告的价值就越高。解就越深入，他的广告就越精准。广告的价值就越高。这是正向的循环，谷歌好用的、免费得软件产品，换取对用户的理解；通过精准的广告，这是正向的循环，谷歌好用的、免费得软件产品，换取对用户的理解；通过精准的广告，找到生财之道。颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨擘。找到生财之道。颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨擘。互联网越来越智能互联网越来越智能Google精确掌握用户行为、获取需求精确掌握用户行为、获取需求IBMOracleEMC
11、MicrosoftIBMOracleEMCMicrosoft角力大数据角力大数据角力大数据角力大数据 EMCEMC的大数据解决方案专注于使组织更有效地使用他们从不同来源产生的数据，包括网络上，网页上，消费者，监控系统和传感器。EMC的数据计算产品事业部正在开发分析工具以解决大数据现象。EMC的大数据解决方案包括40多个产品。2010年7月收购数据库软件供应商Greenplum，花费3亿美元2009年七月收购数据复制解决方案提供商Data Domain，花费24亿美元不一定和大数据完全相关，EMC从2009年起收购了Archer Technologies, SourceLabs, FastSca
12、le Technology, Configuresoft, and Varonis Systems。IBMIBM的策略是提供一个全面的方法来解决前所未有的信息爆炸提出的挑战，因为信息量无论在流量、种类、速度还是活力上都是爆炸式增长IBM一直致力于扩大对包括数据仓库中的大数据、信息流和结构化数据的分析在在过去四年中，去四年中，IBM已已经投入超投入超过120亿美元美元进行了行了23项相相关并关并购，其中包括：，其中包括：2010年9月收购数据库分析供应商Netezza公司，花费17亿美元2010年10月收购网络分析软件供应商Coremetrics2009年10月收购数据分析和统计软件提供商SPS
13、S,花费12亿美元2009年1月收购业务规则管理软件供应商ILOG,花费3亿4千万美元2007年花费20亿美元收购商务智能软件供应商Cognos微微软微软提供了高性能计算能力，并在2005年靠WindowsComputeCluster服务器进入相关市场最近，微软的HPC部门开发了该公司的Dryad并行处理技术社区技术预览(CTP),第一步是向WindowsHPCServer的用户提供处理大数据工具甲骨文甲骨文甲骨文大数据提供的数据库和数据库软件主要用于配合Sun的硬件，特别是它的最高端服务2009年7月收购专注于数据复制和实时数据集成解决方案的私人企业GoldenGateSoftware国外已
14、经开始投资应用国外已经开始投资应用国外已经开始投资应用国外已经开始投资应用美国国务院采用大数据技术开发新的美美国国务院采用大数据技术开发新的美国护照系统。国护照系统。IBM宣布投资宣布投资1亿美元用于大数据研究；亿美元用于大数据研究；美国美国IT公司开始意识到大数据技术能够公司开始意识到大数据技术能够为公司创造价值；为公司创造价值；大数据公司引入汽车行业高管人员扩展大数据公司引入汽车行业高管人员扩展营销业务；营销业务； 大数据组成？技术大数据组成？技术大数据组成？技术大数据组成？技术 改造改造改造改造 数据数据数据数据提供商提供商提供商提供商 展现方式展现方式展现方式展现方式新玩家和新模式正在
15、出现新玩家和新模式正在出现新玩家和新模式正在出现新玩家和新模式正在出现基于基于SQL语言语言:面对OLAP的传统行和列不基于不基于SQL或或map-reduce的的:由谷歌率先由谷歌率先发起发起数据流数据流:基于运行商数据直接生成任意图形新平台技术新平台技术数据入数据入口口/汇聚汇聚数据平台数据平台分析分析不同范围的服务不同范围的服务前提：前提：传统交付模式-单片或基于设备的解决方案云云:能够充分利用物理设施的弹性，以实现处理快速增长数据的能力“数据库将演变成一个虚拟的，基于云计算，超级可扩展的分布式平台。”-ForresteranalystJimKobielus新的传输方案新的传输方案大数据
16、的各部分组成大数据的各部分组成大数据的各部分组成大数据的各部分组成大数据技术：图像、音频、视频、非结构化、社交关系数据处理技术商；大数据技术：图像、音频、视频、非结构化、社交关系数据处理技术商；现有现有IT系统改造商：大数据咨询公司、集成商、系统改造商：大数据咨询公司、集成商、ERP、商务智能、客户关系管理系统；、商务智能、客户关系管理系统；终端提供商向数据提供商演进：对现有客户数据的深度把握、建立客户之间的社交和联系；终端提供商向数据提供商演进：对现有客户数据的深度把握、建立客户之间的社交和联系；展现方式：大型控制中心、移动终端展现方式：大型控制中心、移动终端展现方式：大型控制中心、移动终端
17、展现方式：大型控制中心、移动终端在多样性、体量、速度三大特征的指引下，大数据将有新型的展现方式：大型控制中心和在多样性、体量、速度三大特征的指引下，大数据将有新型的展现方式：大型控制中心和移动终端，实现数据的实时处理和快速决策。移动终端，实现数据的实时处理和快速决策。 大数据在中国的机遇？投资重大数据在中国的机遇？投资重大数据在中国的机遇？投资重大数据在中国的机遇？投资重点点点点 规模巨大规模巨大规模巨大规模巨大 长期长期长期长期云计算、物联网从政绩工程变成实用工程云计算、物联网从政绩工程变成实用工程云计算、物联网从政绩工程变成实用工程云计算、物联网从政绩工程变成实用工程国内各地制定云计算国内
18、各地制定云计算“十二五十二五”规划规划云计算、物联网园区云计算、物联网园区中国各地制定或公布了云计算、物联网等产业规划；这些工程的初始着眼点在房地产，政中国各地制定或公布了云计算、物联网等产业规划；这些工程的初始着眼点在房地产，政绩工程居多，大数据作为核心内容端，使得政绩工程变为使用工程。绩工程居多，大数据作为核心内容端，使得政绩工程变为使用工程。云计算、物联网、社交化媒体、云计算、物联网、社交化媒体、GIS为大数据提供了丰富的数据来源。因此大数据中包括为大数据提供了丰富的数据来源。因此大数据中包括的每个用户的身份、地点、时间、喜好、厌恶、社会关系等等大量的信息。伴随数据挖掘的每个用户的身份、
19、地点、时间、喜好、厌恶、社会关系等等大量的信息。伴随数据挖掘和分析的技术发展，我们即将步入基于大数据的智能化时代。和分析的技术发展，我们即将步入基于大数据的智能化时代。改变商业模式改变商业模式改变商业模式改变商业模式卖license卖服务从对从对licenselicense的需求到对整体解决方案、服务的需求的需求到对整体解决方案、服务的需求易复制、利润率高边际成本为零卖人头盗版客户粘度高软硬一体化利润率较卖license低，需要解决复用问题因泛在计算而导致因泛在计算而导致行业需求变化行业需求变化利用好海量的大数据，解决中国软件公司卖人头、卖授权、无粘度的商业模式，转变为以利用好海量的大数据，解
20、决中国软件公司卖人头、卖授权、无粘度的商业模式，转变为以数据服务为核心的新商业模式。数据服务为核心的新商业模式。启发各行业对启发各行业对启发各行业对启发各行业对ITIT系统投资新热点系统投资新热点系统投资新热点系统投资新热点不同行业中，企业信息化成熟度差异明显；政不同行业中，企业信息化成熟度差异明显；政府府等行业等行业的信息的信息化成熟化成熟度明显领先，总度明显领先，总体体处于扩展和处于扩展和整合优整合优化阶段化阶段；除金融和电信之；除金融和电信之外的服务行业的信息化建设成熟度相对较低外的服务行业的信息化建设成熟度相对较低,仍仍处处在成长阶段。在成长阶段。对大数据的处理需求将启发对于对大数据的
21、处理需求将启发对于IT系统投资新系统投资新热点，证实热点，证实IT推动业务发展，增加对推动业务发展，增加对IT投资。投资。从从IT系统走向大数据决策分析系统走向大数据决策分析未来着眼点在于服务未来着眼点在于服务2000制造业制造业金融金融电信电信政府政府互联网企业互联网企业自动化走向初步信息化自动化走向初步信息化快速发展快速发展整体解决方案需求整体解决方案需求年年600亿投资规模亿投资规模信息化走向移动互联化信息化走向移动互联化基本架构已经建立基本架构已经建立相对成熟相对成熟500亿以上投资规模亿以上投资规模手工化向自动化转型：手工化向自动化转型：成熟度低成熟度低成长阶段成长阶段中国建筑信息化
22、投入中国建筑信息化投入占总收入占总收入0.03%建筑建筑流通流通移动互联化数据智能化大数据 大数据专题可能的演进路径大数据专题可能的演进路径大数据专题可能的演进路径大数据专题可能的演进路径中国互联网重视并加大投资中国互联网重视并加大投资中国互联网重视并加大投资中国互联网重视并加大投资微博为新浪带来巨大价值微博为新浪带来巨大价值马云的判断来自于数据分析马云的判断来自于数据分析“2008年初年初,阿里阿里巴巴平台上巴巴平台上整个整个买买家家询盘数急剧下滑询盘数急剧下滑，欧美对中国采购在欧美对中国采购在下滑。海关是卖了下滑。海关是卖了货货,出去以后再获出去以后再获得数据得数据;而我们提而我们提前半年
23、时间从询盘前半年时间从询盘上推断出世界贸易上推断出世界贸易发生变化了发生变化了。”马云对未来的预测，是建立在对用户行文分析的基础上。通常而言，买家在采购商品马云对未来的预测，是建立在对用户行文分析的基础上。通常而言，买家在采购商品前，会比较多家供应商的产品，反映到阿里巴巴网站统计数据中，就是查询点击的数前，会比较多家供应商的产品，反映到阿里巴巴网站统计数据中，就是查询点击的数量和购买点击的数量会保持一个相对的数值，综合各个维度的数据可建立用户行为模量和购买点击的数量会保持一个相对的数值，综合各个维度的数据可建立用户行为模型。因为数据样本巨大，保证用户行为模型的准确性。因此在这个案例中，询盘数据
24、型。因为数据样本巨大，保证用户行为模型的准确性。因此在这个案例中，询盘数据的下降，自然导致买盘的下降。的下降，自然导致买盘的下降。腾讯在天津投资建立亚洲最大的数据中心；百度也在投资建立大数据处理中心；新浪腾讯在天津投资建立亚洲最大的数据中心；百度也在投资建立大数据处理中心；新浪推出企业微博产品，提供精准的数据分析服务。推出企业微博产品，提供精准的数据分析服务。更多行业的应用更多行业的应用更多行业的应用更多行业的应用政府、金融、电信等行业投资建立大数据的处理分析手段，实现综合治理、业务开拓等目政府、金融、电信等行业投资建立大数据的处理分析手段，实现综合治理、业务开拓等目标；应用到制造等更多行业。
25、标；应用到制造等更多行业。未来未来未来未来ITIT投资重心转移投资重心转移投资重心转移投资重心转移结构化数据向非结结构化数据向非结构化数据演进，使构化数据演进，使得未来得未来IT投资重点投资重点不再是建系统为核不再是建系统为核心，而是围绕大数心，而是围绕大数据为核心；据为核心；海量数据可以在各海量数据可以在各个部门创造重大的个部门创造重大的财物价值，未来投财物价值，未来投资倾斜。资倾斜。 投资标的投资标的投资标的投资标的相关标的相关标的相关标的相关标的业绩型业绩型业绩型业绩型+ + + +趋势型（红色标注）趋势型（红色标注）趋势型（红色标注）趋势型（红色标注）大数据技术提供商：超图软件、科大讯
26、飞、大数据技术提供商：超图软件、科大讯飞、大数据技术提供商：超图软件、科大讯飞、大数据技术提供商：超图软件、科大讯飞、拓尔思拓尔思拓尔思拓尔思、新浪、新浪、新浪、新浪ITIT系统改造商：汉得信息、太极股份、用友软件、东方国信、系统改造商：汉得信息、太极股份、用友软件、东方国信、系统改造商：汉得信息、太极股份、用友软件、东方国信、系统改造商：汉得信息、太极股份、用友软件、东方国信、久其软件久其软件久其软件久其软件终端提供商：广联达、终端提供商：广联达、终端提供商：广联达、终端提供商：广联达、大智慧大智慧大智慧大智慧、四维图新、阿里巴巴、四维图新、阿里巴巴、四维图新、阿里巴巴、四维图新、阿里巴巴新型展现方式：威创股份新型展现方式：威创股份新型展现方式：威创股份新型展现方式：威创股份信息安全解决商：卫士通信息安全解决商：卫士通信息安全解决商：卫士通信息安全解决商：卫士通重点推荐：超图、重点推荐：超图、重点推荐：超图、重点推荐：超图、讯飞、拓尔思讯飞、拓尔思讯飞、拓尔思讯飞、拓尔思、威创、广联达、卫士通、威创、广联达、卫士通、威创、广联达、卫士通、威创、广联达、卫士通敬请雅正敬请雅正敬请雅正敬请雅正 欢迎交流欢迎交流欢迎交流欢迎交流国金证券研究所国金证券研究所 易欢欢易欢欢电话电话:(8621)61038267 :(8621)61038267 邮箱：邮箱：MSN: MSN:
