《数据中台：智慧城市大脑数据中台解决》由会员分享，可在线阅读，更多相关《数据中台：智慧城市大脑数据中台解决（37页珍藏版）》请在金锄头文库上搜索。
1、智慧城市大脑数据中台解决方案内容提纲1背景2规划概念3基本建设内容4典型案例数据中台面临困境内部信息孤岛遍存，各单位信息资源家底不清，信息不 能共享。对数据资源价值认识不足缺乏大数据应用经验。 应用的规划局限大，应用的建设成效不理想跨部门、跨网络、异构数据难以直接共享开放。 缺乏完善的交换体系和机制，没有交换方式数据质量无法管控，数据安全性无法保证。信息不全面、不及时、不准确，容易造成管理漏洞01不知道020304拿不到管不好用不好政务大数据服务发展路线政务大数据可围绕数据从哪里来、怎么用，如何发挥最大价值方向去实施城市的大数据服务平台。 从哪来：通过建立数据交换平台 和渠道，构建“大数据基础
2、” 怎么用：通过大数据支撑跨部门 跨系统的应用建设，实现“大数 据综合治理” 如何用好：通过分析挖掘和营 运大数据面向社会提供服务，提 供“大数据公共服务“核心目的先构建政府大数据基础，在运用 好府大数据的前提下拉动城市大数据发展建设大数据基础建立信息资源目录、数据交换标准规范和 数据交换管理办法和机制；建立数据采集和共享枢纽信息资源共享交换平台 建立与各个部门的数据交换通道建立政府大数据基础库，未来数据资产的雏形充分整合政府现有数据资源、业务资源和政务信息资源，建立部门间数据交换的渠道和统一出入口， 保障数据安全可靠的前提下，实现部门间数据互联互通的同时，沉淀汇聚有价值的数据。政务服务应 用
3、 层智慧公安智慧旅游智慧城管智慧医疗智慧交通综合治理智慧司法计算平台数据源委办局数据互联网数据视频及物联网数据社会化数据批量计算(MaxCompute)即时计算(StreamCompute)实时分析服务(Analytic DB)分布式图计算引擎(GraphCompute)对象存储(OSS)搜索引擎(ES)分布式NoSQL数据存储(Table Store)结构化非结构化即时批量数 据 中 台数据管理服务数据资源平台数据资源服务数据应用服务数据安全服务能力开放平台个人门户API管4A组件 API监测API市场 计费中心 消息管理流程管理 智能调度专题层主题层 明细层基础层 缓冲层Gdata数数据据
4、源交换监控数据标准管理数据模型管理元数据管理质量管理成本管理DataWorks数据治理数据DNA全景监控智能标签数据探索数据安全数据资产数据上云工具数据治理能力门户能力市场流程引擎监控中心智搜搜寻 | 发现智能推送4A管理指挥处置中台调度中台文本解析人脸识别人体识别行为识别车型识别语音对话问答服务车速识别城市大脑总体架构场景公有云专有云混合云普通PC机指标梳理及计算BI数据挖掘分析DI数据可视化更多数据分析场景Maxcompute/EMRStreamcomputeOSSDataPhinDataworksQuickBI阿里技术体系DataVPAI开源技术体系HadoopMPPSparkFlink
5、数据 集成全程 调度数据 资产数据 开放智能 研发数据 质量报表 工具挖掘 工具人工 智能方法论中台顶层规划、企业标准制定、数据资产梳理、智能数据加工、价值化数据资产、超市化数据服务、便捷化数据应用行业电信交通政务公安零售司法工业水利环保数据中台内容提纲1背景2规划概念3基本建设内容4典型案例数据中台数据治理方法论OneData统一数据OneID+统一视图OneService统一服务3One理念中台顶层规划企业标准制定数据资产梳理智能数据加工价值化数据资产超市化数据服务便捷化数据应用基础设施工具产品智能取数自助分析数据挖掘人工智能地理信息大屏服务数据构建数据集成全程调度智能研发数据质量数据资产
6、数据开放方法论数据底座异构数据源计算平台批量、实时 结构化数据非结构化数据数 据 资 源 平 台工具集智能层价值层智 能 标 签治理层数据治理DataWorks平台管理数据集成数据开发监控运维据 探 索数 据 DNA景 监 控账号管理用户管理权限管理行为审计实时分析数据管理数据安全数据质量数据服务标签仓库标签中心资源管理权限管理标签模型标签同步模型视图标签工厂方案配置任务管理分析引擎引擎 配置引擎 管理快速 查询报表中心标签计量报表方案报表配置资产计量使用计量全局概览监控配置详情监控监控管理2 数据研发345 数67全全量智能数据智能数据平台门户模型超市智能数据模型工厂模型管理智能算子系统管理
7、模型配置模型可视化指标看板资源仓库资源报告统计API行业应用服务平台智 能 服 务 平 台市政管理局数据规划委数据人社数据旅游委数据卫计委数据气象局数据交通局数据公安局数据感知数据批量计算 (MaxCompute)即时计算 (Blink)对象存储 (OSS)分布式NoSQL数据存储 (Table Store)关系数据库 (RDS)内存数据库 (Redis)批量、实时机器学习 (PAI)中间件网络与安全数据标准管理数据上云（Data2Cloud）接入任务镜像克隆通道管理任务定义网络管理数据监控数据对账日志审计标准干净接入层1数据模型管理智能ETL数据中台总体架构内容提纲1背景2规划概念3基本建设
8、内容4典型案例数据中台ONE DATA-统一数据研发 资产管理数据分层加工操作层缓冲层基础层主题层分析层交通分析库旅游分析库食品药品分析库教育分析库民政分析库司法分析库财政分析库环境分析库人口库房屋库法人库关系识别实体关联状况提取规律发现互联网数据政务内网数据物联网数据政务外网数据音视频数据（结构化）互联网数据政务内网数据感知数据政务外网数据音视频数据数据 标准化全量数据 合并数据分域整合清洗信用库个人空间库办事过程库信用信息库行政监督库学位资源库企业服务库网格管理库权责清单库企业库常用专题基础特征类型状况规律行为标签：证照库地理信息库基于One Data的数据模型开发和数据资产管理服务在原始
9、数据之上进行分层加工，按一定规律和算法进行关联、分组和汇总，形成具备业务维度的数据为 上层应用提供分析应用支撑。制定与人口综合库建设、数据共享、数据应用相 关的标准规范，以人口库标准规范为导向，完成 人口综合库的库表设计及数据的归集、清洗、关 联与加载，建成全市统一规范化、标准化的人口 综合数据库。各单位需确保提交的人口相关数据 的身份号码信息完整，只要有涉及人员的信息都 必须提供相对应的身份号码信息（有身份证号码 的原则上应提供身份证号码）；各单位需参照人 口库标准体系规范，提供规范格式的人口数据， 确保人口相关数据的格式准确，对不符合格式要 求的数据在提交前要做好转化工作。人口综合库建设数
10、据应用相关的标准规范，法人数 据库建设：以法人库标准规范为导 向，完成法人综合库的库表设计及 数据的归集、清洗、关联与加载， 建成全市统一规范化、标准化的法 人综合数据库 。各单位需参照法人 库标准体系规范，逐步改造自建系 统，提供规范格式的法人数据，确 保法人相关数据的格式准确，对不 符合格式要求的数据在提交前做好 转化工作。各单位需确保提交的法 人主体信息，必须确保法人主体信 息字段的完整性和准确性，如：统 一社会信用代码、组织机构代码、 法人名称等。各单位提交的法人相 关业务表信息，必须确保每张业务 表信息能关联到唯一法人主体上。法人综合库建设工商质检民政编办税务.数据归集数据清洗基础信
11、息纳税参保行政执法数据共享数据分析登记信息续存信息成员信息场所信息资本信息固定资产无形资产其他资产资产信息许可资质许可信息备案信息资质信息荣誉信息涉税信息五险一金商业参保公共支付行政处罚行政强制行政征收行政确认数 据 源归 集 清 洗主 题 库制定与法人综合库建设、数据共享、数据共 享1数据定义。可信电子证照包括基础数据和验证数 据。基础数据包括证照名称、颁发单位、签发单位、证 照类型、证照期限等信息。验证数据包含电子签名和时 间戳，其中电子签名用来保证电子证照的完整性、真实 性、不可否认性，时间戳用来保证电子证照生成的时间 权威性。2数据归集。证照数据归集包括自动、实时归集 和人工归集。在归
12、集过程中，各单位通过使用可信电子 证照服务接口对结构化数据进行签名，生成版式文件并 加盖电子印章，再通过数据交换平台推送到归集库。3数据清洗入库。建立分类可信电子证照数据清 洗规则，对归集的证照数据通过清洗平台进行清洗，对 符合质量要求的证照数据予以入库，对不符合质量要求的证照数据反馈给归集部门进行整改。电子证照库建设清洗、比对、转换、整合各政府部 门异源异构的个人信用数据资源，建 立健全市个人信用评价标准体系，并 逐步推进企业、中介、社会团体、机 关事业单位等其他主体信用评价标准 体系建设，结合国家信用信息相关规 范，建成全市统一的信用信息库，提 供标准化的信用数据监控和服务，促 进信用信息
13、的深度共享和应用，推进 信用“容缺受理”、部门精准监管等” 最多跑一次”政务场景应用结合国家标准公共信用信息分类与编码规范（征求意见稿）和公共信用信息基础数据项规范（征求意见稿），制定和 完善数据元、数据分类与编码、数据结构与转换等库表设计规范，重点突出个人、企业、中介、社会团体、机关事业单位等五类 主体的信用评价分类标准建设。信用信息库建设数据资产门户信息中心作为数据整体的管控者，需要对数据中台的数据资产进行统一管控和查看，无论是各类型数据的元数 据信息，都需要能从资产门户让使用者知道有哪些数据可 用，让信息中心知道有哪些属于可管，数据中台能对数据 状态情况进行查看和分析。按照多个维度，维护
14、不同的目录分类。可以从数据表、 数据库、业务分类、部门等多维度进行目录分类。对数据采集、加工、融合、应用的全链路监控提供从数据采集接入 到服务业务应用的全 链路数据监控能力。 自定义数据监控链路， 从而可快速锁定故障 节点，在第一时间通 知负责机构，极大缩 减业务修复时间。 数据链路全 监控对象全 问题锁定快 响应速度快ONE ID-统一智能标签数据治理缓冲层操作层基础层主题层分析层语 义 化 建 模数 据 服 务 化智慧城市社会治理经济运行公共服务分析应用统计计算类 衍生标签（数据开发）业务经验类 衍生标签（业务人员）数据挖掘类 衍生标签（算法开发）原生标签（数据开发）智能 标签智能 标签数
15、据探索 画像分析.智能标签 屏蔽掉应用开发人员对于下层多个计算存储资源的深入理解与复杂的系统对接工作 通过数据服务的形式透出也有助于信息中心对数据使用的管理，避免资源的重复和冗余。基于智能标签的数据探索 通过拖拉拽、标签筛选、连线配置的方式，快速实现数据与智算子 的快速组装。 业务模型编排的逻辑思路可视化展现，业务人员可理解。 通过标签筛选、交并差等逻辑运算组件、以及修改算子参数等，支 持快速调整已有业务模型，支持模型多次复用。 对业务模型编排得到的结果进行配置，可为目标打上新标签。 支持将业务模型发布为API，上架到OneService，供其他应用调用。 业务模型的测试运行结果集列表展现，支
16、持导出本地文件OneService整合长沙智能数据中台的数据服务能力， 快捷的将已有能力授权给内外部应用访问使用，服务于政府部门、企业、个人集中的服务开放门户提供集中的能力服务门户，提高能力使用效率，降低 服务搜索成本统一的服务分享平台统一汇聚已有的数据和能力，形成汇总视图，供内外 部应用与检索统一的能力出入口快捷的将已有能力授权给内外部应用访问使用，是整 个数据中台生态的统一能力出入口标准化的能力支撑平台构建数据服务能力、应用服务能力、消息服务能力的 标准化发布模板，降低二次学习成本One Service 统一数据服务实现数据业务化，支撑应用能力共享服务平台做为智能数 据中台“调度员”的能力：服务管理服务门户及展现服务注册及停启服务安全分级控制应用服务申请审批应用服务授权管理服务调度应用服务源调用对接服务调用优先级管理服务调用流量控制服务调用性能监控共享服务平台-服务市场1 服务检索2 服务详情3 申请入口接口详情请求参数响应示例申请部门申请应用关键字快速检索最近热搜推荐类目定位所属应用过滤申请周期申请原因错误码定义详细描述服务热度通过服务市场模式，直观呈现接入应用和数据API的情况
