大数据可视化分析平台介绍

《大数据可视化分析平台介绍》由会员分享，可在线阅读，更多相关《大数据可视化分析平台介绍（450页珍藏版）》请在金锄头文库上搜索。

1、大数据可视化分析平台一、背景与目标 基于邳州市电子政务建设的基础支撑环境， 以基础信息资源库（人口库、法人库、 宏观经济、地理库）为基础，建设融合业务展示系统，提供综合信息查询展示、 信息简报呈现、 数据分析、 数据开放等资源服务应用。 实现市府领导及相关委办 的融合数据资源视角， 实现数据信息资源融合服务与创新服务， 通过系统达到及 时了解本市发展的综合情况，及时掌握发展动态，为政策拟定提供依据。 充分运用云计算、大数据等信息技术，建设融合分析平台、展示平台，整合现有 数据资源，结合政务大数据的分析能力与业务编排展示能力，以人口、法人、地 理，人口与地理，法人与地理，实现基础展示与分析，融合

2、公安、交通、工业、 教育、旅游等重点行业的数据综合分析，为城市管理、产业升级、民生保障提供 有效支撑。 二、政务大数据平台1、数据采集和交换需求：通过对各个委办局的指定业务数据进 行汇聚，将分散的数据进行物理集中和整合管理， 为实现对数据的分 析提供数据支撑。 将为跨机构的各类业务系统之间的业务协同， 提供统一和集中的数据交互共享服务。 包括数据交换、共享和 能。ETL等功2、海量数据存储管理需求：大数据平台从各个委办局的业务系统里抽取的数据量巨大，数据类型繁杂，数据需要持久化的存储和访问。不论是结构化数据、半结构化数据，还是非结构化数据，经过数据存储引擎进行建模后， 持久化保存在存储系统上。

3、 存储系统要具备高 可 靠性、快速查询能力。3、数据计算分析需求：包括海量数据的离线计算能力、高效即席数据查询需求和低时延的实时计算能力。 随着数据量的不断增加， 需要 数据平台具备线性扩展能力和强大的分析能力， 支撑不断增长的数据 量，满足未来政务各类业务工作的发展需要， 确保业务系统的 不间断 且有效地工作。4、数据关联集中需求：对集中存储在数据管理平台的数据，通过正确的技术手段将这些离散的数据进行数据关联， 即：通过分析数据间的业务关系， 建立关键数据之间的关联关系， 将离散的数据串联起来 形成能表达更多含义信息集合，以形成基础库、业务库、知识库等 数 据集。5、应用开发需求：依靠集中数

4、据集，快速开发创新应用，支撑实际分析业务需要。6、大数据分析挖掘需求：通过对海量的政务业务大数据进行分析与挖掘，辅助政务决策，提供资源配置分析优化等辅助决策功 能，促 进民生的发展。级别的、 PB 的融合架构，使用 MPP 处理 MPP 采用新型数据库 +Hadoop 处理 Hadoop; 同时为应用提供丰富的 SQL 支持能力使用高质量的结构化数据， 海量 半结构化、非结构化数据，从而满足用户多种数据的处理需求智慧政务：基于分布式计算、 存储框架，面向政府不同价值的数据源， 通过采集 存储、建模、挖掘等大数据技术， 在社会保障、 公共安全、 人居环境、 劳动就业、 文化教育、交通运输、综合治

5、税、消费维权、精准扶贫等领域开展大数据应用， 优化公共资源配置，提高公共服务水平。帮助政府促进经济发展、完善 社会治理、提升政府服务管理能力、服务改善民生，培育 壮大新兴产业。采集并分析多利用大数据分析平台，如下图所示的政府综合决策分析系统， 个 部门共享上传的业务数据，为政务部门提供决策支持。全市各如下图所示的政府效能监察大数据系统， 通过对各类政务服务事项，从而 对办分析， 高效的及时监察、 个部门单位的政府网上办事流程进行多维度， 事效 率低下的职能部门和审批人员实现高效监督； 找出设置不合理的办事流程， 秒级 实现政府部门网上办事多维度的数据分析挖掘，促进政府办事流程的优化。 展现效果

6、，让决策者一目了然发现问题，提升政府的服 务水平。基础信息融合应用展示分析业务主题库基于政务大数据平台开发或构建的各 类 系统如四大基础库系统、 各系统不需要再与任何政府部门业系统， 通过 政务大数 据平台信息枢纽的作用， 为政府业务办理提供支撑。务系统对接， 而直接从政 务大数据平台关联形成数据，三、视频云结构化分析系统 提视频云结构化分析系统可实现视频中车辆和 活动目标的结构化信息提取， 支持智能结构化分析后文本信息和图片信息的存储 和检取属性丰富， 精确度高； 支持第三方标智能分析性能随着设备数量增加呈线 性增强；索；支持动态扩容，界面，IE 系统自带准视频流的接入和智能分析应用； 支持

7、本地录像的智能分析；提供智能检索、数据统计、布控报警、任务管理、资 源管理、集群管理、系统校 时、日志查询等功 能。 1.车辆大数据分析车辆图片以图搜图车辆以图搜图是基于图片的搜索模式， 通过图片建模后特征向量的比对分析， 并 且在被搜索图片中选择特征区域进行二次比对， 从图片库中检索出符合条件的图 片，并根据相似度返回比对结果。准确率比单纯建模后特性限 量比对高 50% 。 过车数据处理服务过车数据处理包括过车数据检索、智能研判、 OD 分析、统计分析等几大类。 过车数据检索 过车数据检索是通过全文检索技术， 对海量过车数据进行快速检索， 支持精确查 询、模糊查询、多条件组合查询。支持千亿过

8、车数 据中秒级查询到结果。过车数据检索具体包括以下功能：普通过车查询支持根据模糊条件、组合条件进行过车信息的查询。 可选的条件包括卡口、车牌、 车型、时间段等。针对只知道部分车牌信息的车辆可以输入 “*”代表多位，“？” 代表一位号码，进行模糊匹配。违法车辆查询支持根据组合条件进行报警车辆的查询， 违法车辆包括超速行驶、 闯红灯等 车辆， 可选条件包括卡口、时间段等。未识别车辆查询支持根据组合条件对未识别车辆进行查询， 未识别车辆包括非机动车辆、 没有车 辆通过确拍照的、只抓拍下部分车牌的车辆、正确抓拍却未识别出的车 辆， 可 选条件包括卡口、时间段等。 布控报警查询支持对布控的车辆及布控产生

9、的报警进行查询。异常牌照查询支持根据组合条件对异常牌照的车辆进行查询， 异常牌照包括假牌、 套牌 等， 可 选条件包括卡口、时间段等。红名单查询支持对红名单车辆进行情况。行车轨迹查询 支持根据行车轨迹对过车信息进行查询2.智能研判智能研判是通过对海量过车数据的分布式计算分析， 快速挖掘出其中有价值 的信 息。智能研判具体包括以下功能：行车轨迹智能研判 车辆轨迹智能研判功能包含对精确目标、模糊目标两类车辆进行轨迹智能研判。 精确目标车辆轨迹智能研判： 分析特定车辆在一段时间内经过多个信息采集点形 成的行车轨迹，在 PGIS 上重现该车辆的行车路线。 “特定车辆”是指查询者明 确该车辆的车牌号码，

10、 至少清楚车牌号码中绝大部分字符及准确的排序位置， 在 查询过程中也可辅以准确的车身颜色或车型等其它特征信息缩小系统筛选范围。 “特定车辆”行车轨迹出现在信息平台的 PGIS 地图上，单击任一采集点的 卡 口图标，能重现当时车辆被 捕获抓拍的高清照片。 若查询者确认该车辆为嫌疑车， 则可启动布控报警与实时跟踪功能， 当该车下一 次穿过任意卡口（或卡口式电子警察）时，系统将自动报警并提示监控人员，同 时该车在未拦截之前， PGIS 地图上将实时显示其后续穿过的卡口 位置、行车轨 迹、趋势方向等信息。模糊目标车辆轨迹智能研判： 当侦查或目击者提供的车辆特征信息不明确时， 结 合有限的车辆特征信息和

11、车辆逃逸方向， 综合目击者发现它的时间段、 有限的车 辆特征信息、逃逸方向范围内的卡口等客观条件进行检索查询，在PGIS 上勾勒出同时满足上述条件的所有车辆的行车轨迹， 在查询过程中也可辅以准确的车身 颜色或车型等其它特征信息缩小系统筛选范围。 为侦查办案工作进一步开展提供 参考依据，比如：提供这些相关车辆的高清照片，其中包含清晰的 车牌号码、车 辆轮廓特征（车型、车品牌） 、驾驶员面部特征等。短时通过车辆智能研判 短时通过车辆智能研判是通过区间测速功能， 对通过 区间的时间在设定阈值内的 车辆进行研判。短时通过车辆智能研判一方面有 助于将长期超速行驶的车辆纳入 治超名单，通过安装在街面的 L

12、ED 信息发 布屏对其进行公示、警告；另一方面 有助于公安交通管理部门统计分析哪些 路段发生超速行驶的次数最多， 以辅助决 策是否需要对这些道路进行加强管 理，消除潜在的交通事故隐患。 跟车关联智能研判 跟车关联智能研判是针对 刑侦时犯罪团伙车辆经常结队活动的特点， 对犯罪嫌疑 车辆进行信息查询 时， 根据车牌省份地域分析其相邻车辆号牌， 挖掘出有关联的 车辆，为办 案提供线索。根据犯罪嫌疑车辆的车牌号码、车牌种类、车辆通路口 名称及 车道号这几个条件筛选出与犯罪嫌疑车辆有分析时间间隔、过时间、 关联 的车。 选定车牌号码、时间段、路口等信息，通过设定的跟车间隔时间大 小，分析出与 此车辆关联

13、的其他车辆过车信息。套牌嫌疑智能研判 套牌车辆智能研判功能主要包含基于车辆多个特征交叉比 对的研判分析和基于 行程时间的研判分析两大类。基于车辆多个特征交叉比对的套牌车辆智能研判： 综合分析车辆号牌、 车型、车 身颜色等车辆特征， 自动发现套牌车辆， 因为车牌号码识别准确率最高， 选择车 牌号码为基准参数。比如：在城市内发现车牌号码一致，但车型不同，或者车牌 号码一致，但车身颜色不同， 那么其中 1 辆一定是套牌 车， 在认定过程中将借助 来自车管库的登记信息。基于行程时间的套牌车辆智能研判：在 PGIS 地图上，以卡口、卡口式电子 警察 布点较密集的路段为中心划定几个区域， 区域之间设定时间

14、差， 对多 个区域内的 通行车辆进行交叉比对， 如果发现车牌号码相同的车辆， 那么 其中 1 辆一定是套 牌车，在认定过程中将借助来自车管库的登记信息。 其 原理是在现实环境中同一 辆车从一个区域跨度到另一个区域的行程时间不可 能小于设定的时间差。 频繁出入车辆智能研判 频繁出入车辆智能研判是分析 一段时间内车辆通过某一个或某几个卡口的频度， 当频度大于设定值时， 认 为该车辆活动异常， 并可显示车辆的活动轨迹。 该信息 可用于车辆预警， 同时提供统计报表，支持打印、保存及数据导出。 区域碰撞智能研判 比区域 碰撞智能研判是利用数据碰撞技术来加速车辆特征信息的提取工作， 如在两个卡口或两个区域的所有卡口之间进行数据遍历， 找出符合检索条件的车 辆。根据嫌疑人会用类似的手段连续作案的动机原理， 当在一定时间范围发生作案手 段类似的案件， 对于指定的两个或两个以上区域范围内的所有卡口为基点， 在指 定的时间范围内， 通过遍历搜索的方式， 碰撞搜索并精确定位具备相同车牌号码 的机动车，可以快速发现不同区域涉案嫌疑车辆之间的关联 性。 初次入城智能研判在选定时间段和路口时， 查询所有首次通行选定路口的车辆的过车信息， 对 于任 意车牌号码只记录首次通行的一条过