《2014年数据库技术大会2014年数据库技术大会杜长嵘》由会员分享，可在线阅读，更多相关《2014年数据库技术大会2014年数据库技术大会杜长嵘（35页珍藏版）》请在金锄头文库上搜索。
1、数据分析漫谈谈 - 实践与个案分享 -杜长嵘 / Lionel Tu 2014/01那些年我们一起追过的数据数据库 工具统计分析市场营销1995数据分析/数据库营销库营销Pattern EvaluationData MiningTask-relevant DataSelectionData WarehouseData CleaningData IntegrationDatabases2000数据挖掘技术大拿分析妹产品君2012大数据那些年我们一起追过的数据数据宇宙数据源统计统计 分析方法分析工具2012 2.8 ZB2020 40 ZB2010 1.2 ZB2008 0.49 ZB2005 1
2、50 EB移动设备 智能电视/电表 穿戴式设备 传感器/RFID 生物基因文本挖掘 机器学习 神经网络调查研究 政府机关普查 水电工共单位次数分配表 交叉分析Excel SPSS SAS互联网 金融保险 医疗交通 电信/石化回归分析 时间序列 多变量分析 决策树Splus MinitabSQL R什么是数据分析？数据分析：给个定义数据分析是指用适当的统计方法对收集来的大量第一手资料和第二手资料进行分析，以求最 大化地开发数据资料的功能，发挥数据的作用。是为了提取有用信息和形成结论而对数据加 以详细研究和概括总结的过程Analysis of data is a process of inspec
3、ting, cleaning, transforming, and modeling data with the goal of highlighting useful information, suggesting conclusions, and supporting decision making. Data analysis has multiple facets and approaches, encompassing diverse techniques under a variety of names, in different business, science, and so
4、cial science domains.Understanding individual customers lifestyles, needs and preferences, their loyalty to brands and responsiveness to communications in order to make marketing recommendations, at an overall strategic level or versus particular activities. Including 2 areas, measurement & analytic
5、sCreate value to consumers and marketers by delivering the consumer-centric data platform and insight services that maximize user engagement and enable innovative marketing solutions数据分析不是做学术研究，而是要从数据中看到、发现Insights，提炼为information，内 化为knowledge，并将其转化为具体可行的行动方案，最终对公司产生正面价值的影响的 Excel 和 PowerPoint 文档，但
6、只有 bite 可以采取行动动的 insights数据分析两核心理念大多数人都会抱怨：我们们有 terabytes 的数据，gigabytes 的报报表，megabytes1. Deliver the right Data for the right People in the right format at the right time through the right Way.2. Data Information Knowledge Actionable Plan Positive Impact数据分析要做哪些事？数据分析团队的自我定位数据分析团队的自我定位愿景 让让数据成为为公司的竞
7、竞争优势优势使命 让让数据成为为公司的共同语语言定位 基于数据的商业业智慧信息提供者与公司运营营策略咨询顾问询顾问数据分析的工作内容数据快递递（Data Express）报报表系统统（Reporting System）临时临时 数据需求（Custom Request Solution）数据挖掘、分析（Data Mining/ Analysis）数据传传道（Data Evangelization）一定要的功力 的考验验数据传道数据培训训知识识管理数读读对对外数据运营营 新员工数据培训 各团队数据培训 每月数据分享会 数据藏经阁 蒐藏所有数据相关研究报告的图书馆 数据相关基础知识百科 每两周发布精
8、华浓缩 版数据分析报告 中国网络视频 指数 数据中心报告，网页及微博运营数据培训 有趣的数据体验赌轮连续掷 出致心脏脏病可能认识目标者的人， 。的谬论谬论 说说了什么 女孩，相信示，多 在我要寄一 少数车祸发 生在车速超过时速150公里 再请他转寄，如此转寄到目标者手 中，请问中间经过 人数？ 开快车较车较 安全多数人 第三组：11,13,27,28,29题题 现场有两人是同月同日生的机率为？ 嚼口香糖导导了五个二，下次再掷出二 41人机 到90以你不会想看的演算证证明统计 日期：2013/11优酷土豆数读 网络第一神剧万万没想到Youku 优优酷 上传传用户户每月4亿活跃用户，每日10万个视
9、频 上传分享，除了 1100万 使得优酷成为中国第一的视频 网站，也 总 造 频 就 ：了一群新 总播放量个视频 每天在总播放量：374,895,668 兴的影响者。这一部分人不仅获 得无数月 网 放 民 ： 的赞/顶与 11月播放量：1,268,051 被观看 11月播放量：872,720上或传递 知识，不断地从各方方面面影响着视频 用户 们。99.3万 76.0万 10.7万优酷土豆数读 遇见影响者影响力=上传视频 的VV娱乐娱乐 近一个月影响力TOP5上传传者及其作品的波涛。 张张潮爸张张亮教天天如何玩 游戏戏47.5万影响力=上传视频 的VV2012年王诗龄诗龄 石头头的初 次见见面
10、恬恬的一句“哥 哥”让让石头头害羞了42.9万遇见见影响者 张张亮 lokiwei 八卦快讯讯粉丝数：6,164 粉丝数：225 粉丝数：2,182视 数 15 总视频 数：302 总视频 数：1,904 总播放量：8,887,998 ：12,292,844 11 播 量 2,600,528 评论 ，更激起了网民情感上无法停止 悦轩轩和妈妈妈妈 互动动他们的超暖心父子档！张张亮天 喜爱爱夜蒲3 现场现场 拍摄摄 视频 作品更具有深度与创意，或启发人心或激励情感 天爸爸去哪儿温情 片段盘盘点备注：我们计算的是各位UGC用户上传的视频在整个11月的播放量，播放量越高影响力越大头像上带有 的为优酷认
11、证用户韩韩女主播上衣开胸上阵阵 男搭档调调侃天热热6.9万感觉觉着感粉丝数：1,422总视频 数：1,808 总播放量：77,420,798 11月播放量：831,079继继承者们们-采访访(中字) 李 敏镐镐(拼命演出觉觉悟) 朴信惠6.2万继继承者们们 发发布会拍照(全 体,官方版) 李敏镐镐 朴信 惠 姜敏赫 Krystal(郑郑秀 晶)5.6万我-嘞嘞-个-去粉丝数：1,789总视频 数：4,242 总播放量：34,586,142 11月播放量：817,639爸爸去哪儿第四集 未播出内容：沙漠烤全 羊59.3万爆笑黑人兄弟 刺杀军阀杀军阀3.0万整体数据工作框架数据基础础统计报统计报
12、表平台（面向内部）Data Insights数据应应用/平台研发发（面向外部）哪些人/团队团队 在做数据 分析？数据团队5种组织架构 数据参与者：数据分析团队、业务团队 、技术数据团队A 在业务团 队中B 在技术团 队中C 独立团队D 分散在业 务及技术团队E 为独立团队 且各团队都有5种组织架构优缺点比较组织组织 架构类类型A 在业务团队业务团队 中B 在技术团队术团队 中C 独立团队团队D 分散在业务业务 及技术团队术团队E 为为独立团队团队 且各团队团队 都 有优优点对业务 有更深的了解数据底层有充分了解 数据产品开发 数据科学实验 室知识分享、再利用 数据传道 贴近公司战略方向 更专业
13、统计 分析技能技术支持长期战略性项目 业务 分析团队 支持短期战术 性项目知识分享、再利用 数据传道缺点知识分享局限 数据底层了解受限 跨团队项 目较难 推动与业务 距离远 分析是附加延伸工作 技术人员与分析师需要不同 的技能组合项目优先级排定 业务 、分析与技术团队 互相 牵制技术团队 数据分析师受冷落 知识分享局限 技术人员与分析师需要不同 的技能组合管理层大力支持 独立团队领导 者能力要求建议议业务团队 有非常专门 特定的 数据需求不同的业务团队 有普遍相同 的数据需求有创新需求 数据密集型公司需要明确清楚的团队 定位与 认同 公司对数据的掌握与应用有 一定成熟度企业业内数据分析工作会
14、遇到哪些挑战战？数据工作的五大挑战1. 需要充分了解公司各项业务 及需求2. 除了拥有核心的分析技能外，还必须对数据采集、 处理、存储等技术有充分的了解3. 知识分享机制（接收与给予）4. 执行跨团队项 目5. 获得最高管理团队支持如何提升数据分析能力？数据分析四部曲价值值洞察后见见之明先见见之明发发生什么 事？为为什么会 发发生？难难度什么会发发 生？如何让让它 发发生？数据分析师思维1. 成吉思汗的继承人窝阔 台，公元哪一年死？最远打到哪里？2. 成吉思汗的继承人窝阔 台，当初如果没有死，欧洲会发生什么变化？试从经济 、 政治、社 会三方面分析同样问题样问题 ，两种思考逻辑逻辑1. 甲午战争是哪一年爆发的？签订 的叫什么条约？割让多少土地？赔偿 多少银两？ 2. 日本跟中国100年打一仗，19世纪打了甲午战争，20
