《[精选]大数据的产业价值》由会员分享，可在线阅读，更多相关《[精选]大数据的产业价值（40页珍藏版）》请在金锄头文库上搜索。
1、大数据的产业价值（上）,汪东升 清华大学教授,点击添加文本,点击添加文本,点击添加文本,点击添加文本,目 录,1,2,3,大数据及其相关概念理解,大数据的产业价值,技术发展趋势、问题与建议,大数据概念及其特点 相关概念与关系分析,一、大数据及其相关概念理解,（一）大数据概念及其特点,数据爆炸，知识贫乏，难以决策？,数据,知识,决策,1、大数据概念的发展脉络,2008,2010,2011,“大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。”,2011,2012,“大数据是指具有以下三个特征的数据：大数据量、快速增长及多数据来源及类型的数据。,4V特性： 大规模、多
2、样化、快速增长、 潜藏价值。,2、大数据的构成,大数据包括交易数据和交互数据集在内的所有数据集。,大数据 = 海量数据 + 复杂类型的数据,海量交易 数据,海量交互 数据,海量数据 处理,海量交易数据,企业内部的经营交易信息，主要包括联机交易数据和联机分析数据，是结构化的、通过关系数据库进行管理和访问的静态、历史数据。通过这些数据，我们能了解过去发生了什么。,海量交互数据,源于Facebook、Twitter及其他来源的社交媒体数据构成。包括呼叫详细记录CDR、设备和传感器信息、GPS和地理定位映射数据、通过管理文件传输Manage File Transfer协议传送的海量图像文件、Web文本
3、和点击流数据、科学信息、电子邮件等等，可以预测未来。,海量数据处理,大数据的涌现已经催生出了设计用于数据密集型处理的架构，例如具有开放源码、在商品硬件群中运行的Apache Hadoop。,3、大数据的基本概念,大数据是一种数据，具有可扩展性、多样性、复杂性的特点，需要一种新的架构、新的技术、新的算法以及新的分析工具去管理这些数据，同时从中抽取隐含在内的重要信息。（“Big Data” is data whose scale, diversity, and complexity require new architecture, techniques, algorithms, and anal
4、ytics to manage it and extract value and hidden knowledge from it.）,“大数据”是指数据海量、计算复杂的数据集合，其在一定时间内难以依靠已有数据处理技术来进行有效的采集、管理和分析。大数据通常满足以下“4V”特点：,规模 巨大,产生 高速,形式多样,信息 价值,4、大数据的特点,形式多样（Variety）,信息价值 （Value）,产生高速（Velocity）,规模巨大（Volume）,非结构化数据的超大规模，比结构化数据增长快10倍到50倍。,实时分析而非批量式分析，数据输入、处理与丢弃，立竿见影而非事后见效。,异构性（文本、
5、图像、视频、机器数据），模式不明显，语法语义不连贯。,大量的不相关信息，对未来趋势与模式的深度复杂分析。,规模巨大,互联网数据 2011年全球数据产生量达到1.8ZB，以每本书10MB计算，相当于七百万个中国国家图书馆的容量。 医疗保健数据 海洋气象数据 基因工程 美国国立基因组研究所宣布，“千人基因计划”所产生的数据总量已达到200TB，成为世界上最大的人类基因变异数据集。,数据的度量尺度: 1KB=103B 1MB=106B 1GB=109B 1TB=1012B 1PB=1015B 1EB=1018B 1ZB=1021B 1YB=1024B,产生高速,电信运营数据 中国联通上网记录每秒83
6、万条，每月1万亿条（300TB）。 天文数据 美国大口径望远镜每两周对太空观测一遍，每天产生16TB数据，5年总数据量将达到15PB。 企业运行数据 2000年全球新产生的数据量为1000PB到2000PB，到2010年仅仅全球企业一年新存储的数据量就超过了7000PB。,形式多样,Internet上1分钟内发生了： 639TB IP流量； 2亿 封邮件； 70万 Facebook更新； 30小时 YouTube新增视频； 70万 Google搜索。,信息价值,2011年-2016年中国大数据市场规模,（二）相关概念与关系分析,出租车 云广告,MH370,网络虚拟化,27,云计算虚拟化资源,数
7、据中心物理资源,存储虚拟化,计算虚拟化,北京北五环买房： 120平方米600万,投资理财： 5%-10%利率（30-60万）,租房： 租金1万/月 房子质量好 无须物业费、维修维护、折旧、可能的房产税,住宾馆（30-60万）： 未必每天都住； 弹性，按需 ； 客房服务、卫生、餐饮； 拎包入住。,云计算之PaaS、SaaS。,点击添加文本,点击添加文本,点击添加文本,点击添加文本,云计算的基础设施、 安全设施非常完备。,安全是把 双刃剑,放在云里面的数据，对云的管理而言又是不安全的。,云计算的关键技术,云计算面临的安全问题,关键技术视角,使用者视角,虚拟化技术带来全新安全威胁 数据集中存储引发的安全问题 云服务的管理和调度产生的安全问题 传统安全威胁的新特点,隐私保护和数据安全 运行环境的安全 内容安全,云计算的安全问题,智慧城市带动 行业云发展,智慧城市需要 数据融合,云计算-物联网-大数据,“云”、“物”的核心是“数据”： 云计算计算/业务模式 物联网应用模式 大数据财富、资产和隐性货币,演讲完毕，谢谢观看！,
