《（华为）大数据时代的大机遇课件》由会员分享，可在线阅读，更多相关《（华为）大数据时代的大机遇课件（46页珍藏版）》请在金锄头文库上搜索。
1、大数据时代的大机遇,目录,大数据定义,广义大数据：是物理世界到数字世界的映射和提炼，通过发现其中的数据特征和规律，最终实现提升人们生活质量、提高生产效率的目的； 狭义大数据：是指围绕着海量数据的智能存储、智能挖掘和智能分析；,由于数据量过于庞大，在同样的约束条件下(性能和成本)，使用传统的IT技术无法完成数据的管理和分析,满足4V(Volume、Variety、Velocity、Value，即容量大、种类多、流量快、价值高)指标的数据称为 大数据,大数据是指难以实现存储、搜索、共享、可视化和分析的大型数据集,用未来牵引现在，用现在保证未来！,运营商需要依据大数据发展趋势进行战略选择,新技术的大
2、量涌现，运营商如何选择？,内存分析,流式计算,IBM Streams、Apache Storm,SAP HANA、Oracle Exalytics,MPP 数据仓库,NoSQL,多维 分析,Oracle Essbase、IBM Cognos,数据挖掘/预测分析,文本分析,Hadoop发行版,Dremel、Spanner、Impala、EMC HAWQ,NewSQL,Cloudera、MapR、Hortonworks,Hbase/Hive、Cassandra、MongoDB,Exadata、GP、Teradata、Netezza,SAS、SPSS、R、Mahout,Splunk,自然语言处理,社
3、交图谱 分析,Siri、IBM Watson,媒体智能分析,大数据技术栈,Pregel、Neo4j,Videosurf,软硬一体机,Oracle Exadata、 IBM Puredata,小型机,数据库 分析,多样智能化： 智能决策从结构化数据分析向文本、语音视频媒体的智能分析、社交化图谱分析方向发展,分析实时化： 分析计算向自助式ad-hoc多维分析、实时内存分析、流式计算发展,管理集中化： 数据管理从数据仓库、Hadoop向支持海量数据集中化管理、交互式SQL查询的NewSQL发展,软硬一体化： 传统基础设施从小型机向软硬整合一体机方向发展,数据治理,Datastage,大数据技术向海量
4、、实时和智能发展。在实际的应用过程中按需采用。,目前为止半数以上的运营商已经开始部署大数据，针对具体应用的方案占多数,Source: Informa Telecoms & Media N:240 (All base),结论1,半数以上已经开始部署大数据，但是规模不一；,结论二,相比规划和部署端到端大数据方案，针对具体应用/目的的大数据方案占多数；,TMF 34个大数据分析应用场景,企业管理,欺诈管理,业务流程优化,市场营销,网络优化,客户体验,网页浏览个性化推荐,Checkout个性化推荐,实时互动个性化推荐,基于位置实时个性化推荐,基于业务使用的实时个性化推荐,基于价值的网络规划,新企业用户
5、订单影响分析,基于策略的网络性能管理,个性化的实时交互人工服务,适时的客户接触关怀,客户离网风险预测,客户离网原因预测,个性化的挽留营销活动,挽留营销活动的效果评估,网络故障检测和恢复,基于价值的实时网络拥塞管理,实时Wifi转移(四网协同）,收入保障,合作伙伴价值优化,基于设备的实时个性化推荐,基于互联网记录进行精准广告,产品分析,产品优化,产品设计和开发,产品引入分析,数据货币化,沉默用户（服务）主动关怀,客户自服务渠道效率分析,渠道和时间偏好分析,客户体验差的时候主动关怀,网络故障的时候主动关怀,市场分析&监控,客户对产品的购买概率分析,华为大数据应用情况,截止到2013年11月份，全球
6、拓展86个大数据市场项目，其中39个交付中（11个已经商用）,11个商用项目简介（按正式商用时间先后排序）,中移动集团私有云/南方基地日志详单系统,背景介绍： 北方基地私有云和南方基地，为中移动集团的南北两大云计算基地，集中建设海量日志详单系统，用于集团各省公司共享式地使用Hadoop存储日志详单数据； 系统规模为1xx节点，存储容量1.x PB 业务描述： 基于HDFS的清单数据存储服务。 基于MR和Hive的清单数据统计分析服务。 成功经验： 系统2013年初成功上线商用，已经支撑上线的业务系统包括防骚扰电话、垃圾彩信，等等。,日志详单数据存储系统逻辑功能视图,菲律宾PLDT大数据存储,痛
7、点诉求 如左图，机会1：A(结构化数据存储)+B(非结构化数据存储)；机会2：ETL基础数据处理。 提供的方案 硬件采用x86服务器，软件系统采用OI平台，提供A+B+C的整体解决方案，超出客户需求。 空间和进展 一期已开始交付；二期需求主要是B和C，投资预算超$500万。 后续该大数据存储中心可作为IT网改中的核心部件，为上层各应用（BI/Report/CRM等）提供统一的数据接口和服务。,需求驱动来源 随着MBB发展，用户上网数据暴增，DWH撑爆，话单查询需数十秒甚至分钟级。当前的存储服务器老旧，已无法扩容，急需新的存储解决方案。 客户需求描述 对6个月以上的话单进行归档和简单查询，查询延
8、时最长10秒；对非结构数据（如网络日志）海量存储查询。一期目标是结构化数据的存储，数据量规模300T。,山东移动综合分析系统,与山东移动合作进行网络综合分析系统一期建设： 完成了HADOOP+MPP的大数据架构的搭建； 打通与Gn信令系统、综合资源系统、经分系统、流控系统、话务网管、数据网管、网优系统、拨测系统8个系统的接口； 初步建立网络数据融合分析模型和指标体系；,互联网用户行为分析支撑个性化营销，提升营销效率,借助互联网分析进行全内容智能分发,全内容智能分发平台，功能建设方面已经实现全内容管理、渠道信息管理、个性化推荐管理和互联网渠道运营等模块，并构建了一个包含阅读、视频、音乐、游戏等栏
9、目的手机版全内容聚合portal； 内容方面已实现手机阅读、无线音乐、手机游戏、手机动漫等业务的内容数据接入，手机视频在12月初完成数据接入。 截止到11月26日，通过139导航小说栏目月推荐小说覆盖数达10568本，累计达14826本，累计访问用户数达152842个，成功点播用户数达58996个，共阅读4321101章节,月均阅读约217万章节， 月均收入约19.53万元，预计全年可实现收入约234.36万元。,某省精确营销系统案例,Page 16,与XX移动开展基于热线大数据挖掘的终端销售提升活动,STEP1：定向抽取录音到语音分析引擎，作为重要数据输入,STEP2：深入研究客户热线交互行
10、为数据，输出换机关联强度信息,STEP3：汇集热线大数据与BI标签信息，对典型换机用户进行聚类分析，区分不同购机驱动力用户群体,STEP4：通过专业数据挖掘算法，计算输出用户终端兴趣指数,STEP5：生成个性化手机选择过滤器，匹配出用户偏好终端机型,STEP6：将用户购机兴趣指数、偏好等热线数据挖掘成果应用到在线呼入、外呼/直复营销实践,支持30%录音结构化入库，语音识别率从 35% 提升到了 80%,文本分析及终端兴趣挖掘模型,此次热线终端营销目标机型是低价智能机，从模型输出的34562名用户中匹配出6457人,客服语音数据是最能体现客户真实需求、客户满意度的数据，通过语音数据的文本转换，可
11、以达到数据价值的深入挖掘。,文本分析和数据挖掘模型,聚类分析； 决策树分析； 关联分析； ,文本挖掘分析；,数据开放相关进展,江苏移动、湖北移动均对数据开放非常关注，当前湖北正在考虑进行实际系统落地。主要考虑“开店选址”：根据用户的选择的区域，以数据地图的形式展示该区域的人群特征和统计报表，为大卖场和专业连锁客户开店选址提供依据.,运营商对大数据的需求总结,目录,华为大数据上升为公司战略，持续投入,南京： BDI/SmartMiner/RTD/IA（电软研发中心）,深圳： Hadoop/AMStore（电软研发中心）,印度研究所： Streaming（电软研发中心） Hadoop（电软研发中心
12、） Data Visualization（中央软件院）,美研所： Gauss DB（高斯实验室） Data Mining（诺亚实验室） MOLAP（电软研发中心）,欧研所： SmartSwitch（电软研发中心）,杭州： SmartStream（香农实验室）,徐直军：大数据、云计算、社交网络、移动化是华为公司未来投入战略方向。 大数据未来保持上千人规模重点投入。,华为大数据解决方案概览（内部视角）,Hardware Layer,Platform Layer,Application Layer,Big Data server (OSCA/ATAE3.0),Big Data Storage (Ds
13、ware/DiskArray),Big Data Infiniband,Big Data Hardware Accelerator (FPGA Compress/Filter/Process),Business Consulting Service,Business Process Outsourcing,Resource Managed Service,Data Asset Trade Service (TBD),Real-time Decision,Network dynamic congestion control,Real-time recommendation,Experience
14、Enhancement,Precise Marketing,Improve Efficiency,Innovative Business,Personalized recommendation,Detailed Weblog Inquiry,Offering optimization,Package design for specific OTT,Operation Visualization,Centralized Customer Profile,Capability exposure,Data exposure,BI/SOP/SmartPCC/SDP/UP/CRM/SmartCare/D
15、aaS,OceanInsight,IDC/存储/服务器,端到端提供大数据解决方案（外部视角）,聚焦技术分析平台和价值应用，构建开放、合作的生态环境,大数据业务能力体系框架,数据开放,当前聚焦的应用场景,精准营销,客户满意度维系,产品优化,资源优化,Decision,Operation,内容应用推荐,基于业务使用的实时个性化推荐,基于位置实时个性化推荐,客户对产品的购买概率分析,市场监控,NPS分析,个性化的挽留营销活动,客户体验差的时候主动关怀,用户流量详单查询,渠道和时间偏好分析,基于客户价值的网络规划,基于客户价值的实时网络拥塞管理,基于用户行为的网络资源投放,异动客户资费归位,基于信息热
16、点的资费单元设计,实时业务监控,广告数据开放,区域价值服务,数据管理平台,精准实时营销,客户满意度维系,产品优化,资源优化策略,数据开放,订购率可达传统群发的10倍 使营销上市周期从9天缩短为2小时 全流程自动化，减少人工干预，节省的人力,不满意事件的前置处理减少30%投诉量 增加客户电渠便利度，提升运营效率 单次服务耗时从6分钟下降到4分钟,产品设计从3个月降为1个月 主要资费产品匹配度从50%提升到77% 不匹配客户离网率下降3%,相同投放成本下，后者带来的流量提升是前者的150% 价值小区客户得到优先保障，投诉率下降25%,增加收入来源,数据开放：将数据作为商品，提供开放服务,华为大数据给运营商带来的独特价值,3,1,5,4,2,专业的大数据平台建设和维护能力 电信级安全标准要求，保障系统数据安全,安全/可靠/专业,X86化的计算云，存储云，缓解IOE扩容带来的成本压力 集
