旷视-城市大脑-物联网大数据技术生态

《旷视-城市大脑-物联网大数据技术生态》由会员分享，可在线阅读，更多相关《旷视-城市大脑-物联网大数据技术生态（57页珍藏版）》请在金锄头文库上搜索。

1、,CSDI summit 中国软件研发管理行业技术峰会,演讲主题：旷视物联网大数据技术生态,演讲人：崔鹏 罗义云 李标,旷视：物联网大数据技术生态,旷 视 城 市 大 脑,城 市 管 理 应 用,公 共 安 全 应 用,智 慧 生 活 应 用,业务应用 中台,设备,数据治理,算法仓,门户,底库,解析,聚类,数据 存储,任务 调度,用户 业务中台 任务,数据中台,AI中台,计算,检索,日志,文件,档案,数据计算,存储,存储,流媒体,数据标准化 平台连接,运维 产品连接,IoT平台 基础架构,传感器连接,设备连接,温度传感器,摄像机 智能盒,GB/T 28181 GA/T 1400,物联网设备,W

2、iFi传感器,公有云,私有云,混合云 安全,基础设施,计算,网络,存储,视图物联网平台技术,旷 视 城 市 大 脑,个人简介,崔鹏,技术总监,CBG城市物联网平台技术负责人, 2018年 加 入 旷 视 ， 拥 有 多 年 城 市 级 物 联 网 平 台 开 发 经 验 ， 曾 作 为 轨 道 交 通 视 频 类 相 关 系 统 行 业 标 准 的 主 要 起 草 人 之 一 ， 对 云 、 边 、 端 形 态 的 城 市 物 联 网 有 深 入 理 解 。 目 前 专 注 于 旷 视 城 市 物 联 网 平 台 大 规 模 接 入 并 发 和 服 务 体 系 建 设 。,Contents,0

3、1.物联网平台介绍,02.技术路径,03.未来展望,位置、分层结构,挑战、技术路径和亮点,重点方向,01,物联网平台介绍,城 市 管 理 应 用,公 共 安 全 应 用,智 慧 生 活 应 用,业务应用 中台,设备,数据治理,算法仓,门户,底库,解析,聚类,数据 存储,任务 调度,用户 业务中台 任务,数据中台,AI中台,计算,检索,日志,文件,存储,档案,数据计算,IoT平台,基础架构,传感器连接,设备连接,平台连接,产品连接,温度传感器,摄像机 智能盒,GB/T 28181 GA/T 1400,物联网设备,WiFi传感器,公有云,私有云,混合云 安全,基础设施,计算,网络,存储,业 务 层

4、 接 口 层,物 联 网 平 台,视 图 应 用 平 台,安 全,运维&测试,访 问 控 制 设 备 认 证 数 据 加 密 状 态 监 控 日 志 审 计 故 障 恢 复 数 据 追 溯,自 动 化 测 试 系 统,S D K,A P I,消 息 中 间 件,数 据 压 测,设 备 管 理,规 则 引 擎,智 能 运 维,核 心 层 接 入 层 硬 件 层,数 据,存 储,业 务,告 警,视 频 参 数 检 测,标 准 协 议 网 关,平 台 接 入 网 关,物 联 设 备 接 入 网 关,S DK 网 关,标 准 平 台 模 拟,设 备 接 入 S D K / 协 议 视 觉 类 设 备

5、/ 平 台,主 动 模 式 S DK / 协 议 非 视 觉 类 设 备 / 平 台,视 频 质 量 诊 断,02,技术路径,面对挑战,种类多协议多,安全性要求高,设备数量大,工业级可靠性,时延要求高,网络场景复杂,接入设备,W iFi,IPC,Sensors,NVR Box,GB Platform,GA Platform,Mobile,3rd Platform,数据流类型,视 频 流,图 片 流,多 种 传 感 器 流,告 警 流,控 制 流, 设 备 接 入,业 务 层 接 口 层,物 联 网 平 台,视 图 应 用 平 台 消 息 中 间 件,边 缘 网 关 共 享 驱 动 物 联 驱

6、动 数 字 孪 生,数 据 处 理,S DK,AP I, 标 准 协 议 ,驱 动 复 用,设 备 管 理,规 则 智 能 引 擎 运 维,核 心 层 接 入 层 硬 件 层,数 据 存 储 业 务 告 警, 设 备 联 动 能 力 建 模,标 准 协 议 网 关,平 台 接 入 网 关,物 联 设 备 接 入 网 关,S D K 网 关,设 备 接 入 S D K / 协 议 视 觉 类 设 备 / 平 台,主 动 模 式 S DK / 协 议 非 视 觉 类 设 备 / 平 台, 设 备 影 子 属 性 建 模, 结 构 化 数 据 字 典 流 媒 体 数 据 协 议 文 本 数 据 协

7、议,业 务 层 接 口 层,物 联 网 平 台,视 图 应 用 平 台 消 息 中 间 件,数 据 标 准,S DK,AP I,设 备 管 理,规 则 智 能,核 心 层 接 入 层 硬 件 层,数 据 存 储 业 务 告 警,引 擎 运 维,数 据 传 输, 流 媒 体 分 发 消 息 总 线,标 准 协 议 网 关,平 台 接 入 网 关,物 联 设 备 接 入 网 关,S D K 网 关,设 备 接 入 S D K / 协 议 视 觉 类 设 备 / 平 台,主 动 模 式 S DK / 协 议 非 视 觉 类 设 备 / 平 台, 关 键 参 数 获 取 关 键 平 均 值 计 算 数

8、 据 异 常 通 知,数 据 质 量,视 频 存 储,业 务 层 接 口 层,物 联 网 平 台,视 图 应 用 平 台 消 息 中 间 件, 块 +索 引 存 储 G O P写 入 秒 级 检 索,S DK,AP I, 对 象 转 存 块 +索 引 存 储,设 备 管 理,规 则 智 能,核 心 层 接 入 层 硬 件 层,数 据 存 储 业 务 告 警,引 擎 运 维,对 象 存 储,标 准 协 议 网 关,平 台 接 入 网 关,物 联 设 备 接 入 网 关,S D K 网 关, S3 标 准 T T L + Q u o t a 设 置 冷 热 分 区,设 备 接 入 S D K /

9、协 议 视 觉 类 设 备 / 平 台,主 动 模 式 S DK / 协 议 非 视 觉 类 设 备 / 平 台, 数 据 压 缩,接口形式,SDK,API,消息中间件,功能丰富性 开发难易度 性能适应性 解耦独立性,性能优化,每节点仅一次内存拷贝, 提升效率，降低消耗，保,证时延,流数据TCP长连接,优化缓存数据帧, 接入和分发对缓存帧优化 SDK接收端不缓存, 保证数据传输效率 保证数据完整性,合理利用接口特性,独立线程收发数据, SDK路由短，效率高 API路由长，效率低 消息队列不适合流式数 据，但可以消峰, 提高数据处理速度， 降低消耗，保证时 延,本地最短路由 减少本地调用者跨 节

10、点取数据,整体性能,时延,数量, 端云传输时延毫秒级, 流媒体类设备接入能力10万以上 传感器类设备接入能力亿级,数据存储数量,媒体播放稳定性, 千亿级对象数据, 7x24小时以上平稳展示, 千亿级结构化数据,安全性,访问安全,数据安全,传输安全,操作安全,用户验证,HTTPS交互,日志审计，行为记录 关键操作二次确认,数据加密，多算法选择 数据库定期备份 数据可恢复,设备接入可控，ID识别,服务间ID认证,数据全局追溯,03,未来展望,持续深化,更 大 数 量 更 多 种 类 更 高 并 发 更 复 杂 网 络,更 高 容 量,更 高 性 能 更 高 压 缩,多 硬 件 平 台 轻 裁 剪

11、方 案,安 全 可 信,AI中台技术路径,旷 视 城 市 大 脑,个人简介,罗义云,技术总监,CBG 基础产品部平台开发团队技术负责人, 2018年 加 入 旷 视 ， 曾 任 微 软 高 级 研 发 经 理 ， 负 责 大 数 据 平 台 和 产 品 开 发 ， 现 任 城 市 大 脑 基 础 产 品 部 平 台 开 发 团 队 技 术 负 责 人 。 致 力 于 探 索 视 觉 大 数 据 的 业 务 价 值 和 商 业 落 地 ， 相 信 技 术 可 以 改 变 世 界 。,Contents,01.AI中台介绍,02.技术路径,03.未来展望,什么是城市大脑AI中台？,挑战、技术路径和亮

12、点,AI中台的未来,01,A 中台介绍,城 市 管 理 应 用,公 共 安 全 应 用,智 慧 生 活 应 用,业务应用 中台,设备,数据治理,门户,底库,数据 存储,任务 调度,用户 业务中台 任务,数据中台,日志,文件,档案,数据计算,存储,流媒体,数据标准化 平台连接,运维,IoT平台 基础架构,传感器连接,设备连接,产品连接,温度传感器,摄像机 智能盒,GB/T 28181 GA/T 1400,物联网设备,WiFi传感器,公有云,私有云,混合云 安全,基础设施,计算,网络,存储,城市大脑整体解决方案,业 务 应 用 、 功 能 性 应 用,信令、事件,全量数据,大量数据,IoT 接 入

13、,数 据 中 台,AI中台,数据写入,数 据 存 储 、 视 图 库,逻辑结构,A P I 网 关 调 度 中 心,消 息 总 线 配 置 中 心,功能定位,统 一 接 入 平 台 （,聚 类 解 码,归 档 推 理,研 判 存 储,分 析 检 索,处 理 从 感 知 层 输 入 的 非 结 构 化 数 据 ， 输 出 半 结 构 化 和 结 构 化 数 据 ， 形 成 “ 知 识 ” ， 产 生 业 务 价 值 。,运 维 平 台,计 算 引 擎,数 据 引 擎,）,数 据 总 线 对 象 存 储,元 数 据 存 储,特 征 存 储,计算引擎：如何理解感知到的数据？, 检测、识别, 人脸框位

14、置 人脸特征 女性 25-30岁 未戴眼镜、口罩 , 人体框位置, 店外经营 占道经营 机动车乱停放 非机动车乱停放 , 车牌、车型 人体ReID特征 上衣颜色、款式 裤子颜色、款式 ,数据引擎：理解到的数据如何产生知识？, 判断、记忆、联想,人脸检索,人脸比对,数据引擎（2）, 判断、记忆、联想,轨迹回放,02,技术路径,面临挑战,快,省, 算法速度快,硬件成本低 开发效率高 维护成本低, ,多,算法上线快,好, 算法更新快, 多设备接入 多平台适配 多特征共存 多业务对接, 算法效果好 用户体验好,技术路径,算法迭代 精度提升,工程优化 解码性能优化, 性能优化, 体系结构、指令集优化,硬

15、件选型 专业硬件团队 科学性能测试 阶梯服务器配置,算法仓平台 平台代理 多语言接口 算法管理平台,调度策略 潮汐调度,业务解耦 统一数据协议, 动态资源分配 静默特征升级, 数据总线、消息总线 统一接口、API网关,核心亮点,计算引擎,数据引擎, 集群十万路秒级调度 单卡40路、单机320路视频流解析 多算法仓动态接入 单次亿级人脸聚类规模 脸人机非实时解析 多平台适配, 单机10亿人脸、50亿人机非检索 单机1亿容量下，检索延迟 1秒 不停机静默特征升级, 亿级档案规模 99.5%准确率 一台2卡机3000路一人一档计算能力 档案数据同步延迟1秒, X86/Arm, 统一的数据模型、消息格

16、式, CPU/NPU, Nvidia/Atlas/寒武纪,03,未来展望,未来展望, 全目标解析 全目标存储 全目标归档, 依托旷视天元 训练推理一体化,用户侧学习,全目标归档,降本增效, 进一步性能提升 云、边、端结合,数据中台建设之路,旷 视 城 市 大 脑,个人简介,李标（大彪）,CBG 平台架构团队负责人, 2 0 1 7 年 加 入 旷 视 ， 负 责 业 务 产 品 架 构 以 及 基 础 设 施 打 造 ， 并 完 成 核 心 业 务 线 / 业 务 中 台 / 数 据 中 台 从 0到 1落 地 。, 现 主 要 关 注 企 业 级 架 构 以 及 大 数 据 相 关 技 术 领 域 ， 致 力 于 化 繁 为 简 ， 降 低 复 杂 度 。,城 市 管 理 应 用,公 共 安 全 应 用,智 慧 生 活 应 用,业务应用 中台,设备,算法仓,门户,底库,解析,聚类,用户 业务中台 任务,AI中台,计算,检索,日志,文件,存储,档案,存储,流媒体,数据标准化 平