微软汽车行业大数据平台建设探讨

《微软汽车行业大数据平台建设探讨》由会员分享，可在线阅读，更多相关《微软汽车行业大数据平台建设探讨（61页珍藏版）》请在金锄头文库上搜索。

1、MICROSOFT CONFIDENTIAL汽车车行业业 - 数据驱动驱动的时时代MICROSOFT CONFIDENTIAL汽车行业面临的挑战The Connected Marketing, Sales & ServiceOthersThe Connected VehicleConnected Product InnovationConnected OperationsTransformation OpportunitiesCustomer ExamplesMICROSOFT CONFIDENTIAL信息化的纵深发展，带来汽车行业的大变革数字化转型 60%的客户的交互都是通过数字渠道和经销商

2、网络 车企需要增强他们的价值网络，通过数字渠道的方式来洞察客户 全生命周期的管理。车辆 信息Hub的转型 智能互联车辆 到2020你那互联车辆 的渗透率将从20%上升到90% 开放的生态环境将给车企带来更多的挑战，也给车企提供更多的 服务机会 独特的互联客户体验是未来的主要方向高度互联的业务变 化要求无处不在的客户体验需要3MICROSOFT CONFIDENTIAL汽车行业信息化的趋势为四个“Connected”今天的技术趋势正在引 爆机会！移动企业社交大数据云计算物联网Connected Marketing, Sales & Service 客户更愿意通过数字渠道结合经销商网络来做决定Co

3、nnected Operations 成本和风险管理依然是企业制造和运营的关键因素Connected Product Innovation 智能互联的产品驱动了开发过程中的创新Connected Vehicle 驱动更多的个性化客户体验和持续服务4MICROSOFT CONFIDENTIAL531 应用4600 接口 3400 晚间批量任务没有 “端到端” 的流程. 海量非结构化数据支持效率: 一般一个员员工只能支持 17个应应用车企的“Connected”首先意味着大量业务数据的整合MICROSOFT CONFIDENTIAL6所有的数据都是复 杂、耗时和难以获 取数量 数据爆炸性增长集成

4、各自为政的数据孤岛质量 数据质量不可靠行动 难以快速获得数据价值然而：业务 整合只是一个过程MICROSOFT CONFIDENTIAL设计优化供应链合作新型服务能力优化资源配置通过对客户的洞察来更好 更客户互动捕获细致的数据和优化性能优化设备和流程性能2. 复杂杂的数据流和监监控规则规则7.机器自学习习1. 可扩扩展的数据链链接和数据获获取3. 可按地域的云存储储4. 大数据5. BI商业业智能5. BI商业业智能5. BI商业业智能6. 客户户和服务务管理6. 客户户和服务务管理提供差异化的客户 体验车企需要构建这样的大数据平台和业务互联MICROSOFT CONFIDENTIAL8互联大

5、数据平台带来的价值客户亲 密度情景体验 | 跨设备体验关系生命周期管理crm | plm | scm | dms机器自学习预测 | 分析云平台 + 基础架构全局化 | 可扩展DataMICROSOFT CONFIDENTIAL汽车行业互联的大数据平台方案The Connected Marketing, Sales & ServiceOthersThe Connected VehicleConnected Product InnovationConnected OperationsTransformation OpportunitiesCustomer ExamplesMICROSOFT CON

6、FIDENTIALHadoop Hadoop 集群集群采集和采集和预处预处理理车联车联 网网 Connected carConnected carAPPsAPPsLOBLOBCRMCRMSAPSAPEDW EDW 数据数据仓仓 库库S Streamingtreaming 实时实时分析分析互互联联网网 InternetInternet 官方网站官方网站社区社区舆论舆论情情报报车联车联网网RFIDRFID车载娱乐终车载娱乐终 端端试验车试验车日志日志处处理理企企业业大数据中心大数据中心数据利用数据利用ETLETL分析、展分析、展现现 和其他和其他应应用用ConnectorConnector算法和模

7、型算法和模型R Server /R Server / 机器学机器学习习 / /分析挖掘分析挖掘检测监 控预测维护分析展现市场营销大数据中心平台整体架构MICROSOFT CONFIDENTIALLanding LayerBatch LayerServing LayerSpeed LayerRaw Data StorageStatic Views PrecomputingPrecomputingAd-hoc Batch ViewsStatic Batch Views实时数据流Raw Data StoragePre-computingBatch ViewsLegend:Layer boundary

8、Data flow (with direction indicated)Data exchangeData Landing数据采集数据处理数据展现Indexing and ViewsReal-Time Processing, AggregationsStreaming实时数据流实时数据流ProcessingMicrosoft R ServerSQL Server BIBI to WebSQL ModelingData Area大数据中心平台逻辑架构企业私有云平台基础架构MICROSOFT CONFIDENTIAL大数据中心三大组成部分基础础架构-私有云平台数据存储储及运算-Hadoop平台数据

9、分析及展示-R-Server/BI数据分析平台123MICROSOFT CONFIDENTIAL资源管理平台资源管理平台服务管理平台服务管理平台虚拟化管理工具资源池（异构）资源池（异构）服务器存储网络设备服务流程平台 System Center Service Manager统一门户统一门户数据中心管理员 （资源管理）应用管理员 （应用扩容）最终用户 （服务申请）知识库报表系统管理数据、流程总线配置管理工具监控管理工具门户管理平台 SharePoint Server灾备管理工具传统物理资源虚拟化资源微软私有云(IaaS)平台逻辑架构MICROSOFT CONFIDENTIAL构建统一管理的私有

10、云平台分配专用和共享的资源数据中心资源数据中心资源逻辑与标准 化基础架构多样 化云抽象委派的容量标准化服务开发生产MICROSOFT CONFIDENTIAL私有云的运营数据中心 管理者监控运维虚拟服务器私有云物理服务器网络与网络设备监控排错监视运维数据保护补丁安装MICROSOFT CONFIDENTIAL基础架构监控MICROSOFT CONFIDENTIAL自动化修复IR2667OrchestratorSQL Server 1SQL Server 2Service managerOperations managerVirtual machine managerData protectio

11、n managerMICROSOFT CONFIDENTIAL动态优化资源优化配置增强可用性降低能耗MICROSOFT CONFIDENTIAL更新管理更合规，保持最新状态可配合现有更新服务器使用无需停机启用功能管理基准线扫描服务器修补服务器管理例外虚拟宿主机Virtual machine manager server更新服务器更新编录更新MICROSOFT CONFIDENTIAL服务交互自动化Configuration Manager 数据库库（CMDB）运行手册模板服务虚拟机宿主机用户促进标准化与合规性模版Virtual machine manager 库发布用户角色数据中心 管理者用户

12、MICROSOFT CONFIDENTIAL自动化体检MICROSOFT CONFIDENTIAL记账/收费MICROSOFT CONFIDENTIAL此阶段的存储数据实时 同步由硬件产商提供解 决方案，最终实现 同区 域的数据中心机房间的 冗余，两边都能实时写 入相同的数据副本，以保 证故障产生时能平滑地 切换。本地灾备：主站点数据中心机房的冗余MICROSOFT CONFIDENTIAL可备份到公有云MICROSOFT CONFIDENTIAL INTERNAL ONLY应应用创创新混合的 超大规模的 企业级别 的Microsoft Azure Public, Global, Shared

13、 Datacenters私有云数据中心Core Software InfrastructureIaaSPaaSComputeStorageNetworkAzure Management PortalCloud-inspired infrastructure Powered by Windows Server, Hyper-V, System Center (future Azure Stack)Windows Azure Pack (future Azure Stack Portal)IaaSPaaSComputeStorageNetworkAzure Global DatacentersDa

14、tacenter InfrastructureLinuxWindows ServerLinuxWindows ServerSystem Center + OMS从私有云扩展到混合云MICROSOFT CONFIDENTIAL大数据中心三大组成部分基础础架构-私有云平台数据存储储及运算-Hadoop平台数据分析及展示-R-Server/BI数据分析平台123MICROSOFT CONFIDENTIAL为什么需要Hadoop数据 来源数据 系统数据 访问业务 分析定制 应用现有数据数据库运营 应用新数据有限的数据不足以管理现有的数据，更不用 说新数据，同时还要维护规模性 能。 数据首先必须是结构化

15、的。有限的洞察有限的访问和较差的数据视角 导致较差的分析和低采用度。 很难将洞察转化为行动。复杂的架构更多的数据，更多的用户，更 多的工具制造了复杂性。 统一安全中的漏洞让不良行为 者可以有访问权。传统方式的设计是为 结构化： 结构化的数据 结构化的分析 结构化的流程MICROSOFT CONFIDENTIAL为什么需要Hadoop1)数据类型的限制Enterprise Data Warehouse应用数据源结构化非结构化加载Staging Environment 传统架构Enterprise Data Warehouse服务ELT归档BI 应用建模报表ETLStorage #1Storage

16、 #2Storage NIngest处理加载1MICROSOFT CONFIDENTIAL为什么需要Hadoop1)数据类型的限制2) 处理能力的限制Enterprise Data Warehouse应用数据源结构化非结构化IngestStaging Environment 传统架构Enterprise Data WarehouseServeELTArchiveBI 系统建模报表ETLStorage #1Storage #2Storage NIngestProcessLoad122MICROSOFT CONFIDENTIAL为什么需要Hadoop1)数据类型的限制2) 处理能力的限制3) 数据容量的限制Enterprise Data WarehouseApplicationsData SourcesStructuredUnstructuredIngestStaging Environment 传统架构Enterprise Data WarehouseServeELTArchiveBI Sys