《微构科技大数据平台Vigordata产品介绍1.0》由会员分享，可在线阅读，更多相关《微构科技大数据平台Vigordata产品介绍1.0（44页珍藏版）》请在金锄头文库上搜索。
1、大数据平台VigorData介绍 地址 深圳市南山区大冲国际商务中心A栋2402室 电话 0755 86720611 网址 公司介绍 一 大数据的发展与价值 二 微构大数据平台介绍 三 目录 Contents 产品特性与优势 四 案例介绍 五 十年历程 2013年3月 大数据管理分析平 台V1 0发布 2014年4月 签署广东电网 第一 个大数据项目 2014年12月 签约深圳供电局报表项目 签约南网数据中心改造项目 电科院大数据平台建设项目 大数据管理分析平台 V2 0发 布 成立北方支撑中心 签署广州银行 第一个城市银 行大数据项目 2015年3月 签约国电分省大数据实 施项目 签约华能集
2、团大数据项 目 2015年5月 与Hortonworks签订 战略协定 成为其金牌 集成商 大数据管理分析平台 V3 0发布 参与国家863项目上海 电网 智能配用电大数 据应用关键技术 项目 2016年3月 团队加入极策创客空 间 一站式企业大数据平 台VigorDataV1 0发 布 2016年9月 同策经分一期交付 同策预算一期交付 App流量分析产品交付 web流量分析产品交付 VigorLinker企业数据联 通产品V1 0发布 2016年10月 一站式企业大数据 平台 VigorDataV2 0 发布 2016年12月 同策房地产大数据营销平 台交付 智能家居大数据平台交付 智能家
3、居顶层设计交付 微构营销 VigorMarketing V1 0发 布 2017年4月 一站式企业大数据平 台VigorDataV3 0 发布 微构科技成立2011年3月 大数据团队成立 2007年 2011年 核心成员参与 中国移动139邮箱全 文检索项目 中国移动互联网用户 行为分析项目 十年磨砺 蓄能创新 公司简介 深圳 上海 北京 微构科技是国内领先的大数据平台建设与应用服务提供商 总部设在深圳 承接大数据咨询 开发 实施 培训 运维等全链条业务 公司现有人员近50人 核心团队由深耕大数据领域的技术 专家和实施落地过多个大数据项目的专业人士组成 迄今 为止已为互联网 电信 能源 房地产
4、 金融 物流 制 造等多个领域的超过30 知名企业提供大数据产品及服 务 微构科技提供三大产品 一站式企业大数据平台 VigorData 企业数据联通平台 VigorLinker 企业大数据营销平台 VigorMarketing 公司与腾讯 华为 TD等公司合作 为企业提供客户画 像 潜客 挖掘和广告精准触达服务 公司介绍 一 大数据的发展与价值 二 微构大数据平台介绍 三 目录 Contents 产品特性与优势 四 案例介绍 五 大数据的时代背景 万物链接与万物数据化 大数据的定义 Gartner 大数据 是需要新处理模式才能具有更强的决策力 洞察发现力和流程优化能力的海量 高增长率和多 样
5、化的信息资产 IDC InterDigital 利用获取 探查 分析手段从海量的 各种类型的数据中获取经济价值的新一代技术和架构 大数据的应用方向 技术 应用 主要采用小型机成本高 扩容难 关系型数据库一般仅支持TB级 且不能通过增加服务器节点来 扩展容量 数据仓库不支持实时计算 关系数据模型难以管理多种复杂的数据格式 非结构化数据未被分析应用 专项分析分散在不同系统中 数据交互成网状结构 投资重复 企业经营管理数据与互联网数据相对孤立 有待深化融合 开 展创新应用 应用场景和应用 目标明确 主要 解决当前数据存 储和处理技术遇 到的瓶颈 业务应用目标 尚未明确 数 据潜在业务应 用价值有待分
6、 析挖掘 通过对国内外不同行业大数据应用情况的了解 目前大数据技术主要解决以下两类问题 大数据的商业价值 公司介绍 一 大数据的发展与价值 二 微构大数据平台介绍 三 目录 Contents 产品特性与优势 四 案例介绍 五 业务蓝图 以一站式大数据平台作为基础 与行业具体的解决方案结合 形成大数据行业应用产品体系蓝图 提供基础大 数据平台产品及分析挖掘可视化能力产品 与行业内具备核心竞争力的合作伙伴共谱蓝图 产品驱动 应用技术 数据增删改查 非法数据清洗 实时业务数据统计 多维度报表应用 行业模型应用 房地产 人房匹配模型 机器学习 数据分布式多源采集技术 大数据分布式存储技术 流式处理技术
7、 多维统计分析技术 数据可视化技术 机器学习技术 深度学习技术 双轮驱动 企业数据应用场景 数据基本处理 增删改查 数据统计分析数据实时计算数据深度分析 VigorData OLTP事务解决方案OLAP分析解决方案 Streaming实时 解决方案 深度学习组件解决方案 Spark内存计算引擎 TensorFlow Caffe 数据基础管理解决方案 数据多维统计分析解决方案数据实时计算解决方案 数据深度分析解决方案 产品体系 VigorData 由Visual 可视化自助分析 DeepMiner 深度学习 Platform 存储 计算 服务 Intergration 采集 清洗 加载 四大部分
8、组成 每个部分结合Docker虚拟化部署工具与运营管理平台都 可以独立作为一个子产品 组合在一起则构成一站式大数据平台 子产品介绍 Vigor Data Visual Analytics 数据可视化分析工具 VigorData Visual支持灵活的业务组合分析和任意的时间窗口分析 无缝整合数据运营中需要的全部核心组 件 提供一致的用户体验和极低的维护成本 结合深度分析算法 帮助用户洞察无法直接观测到的数据背后的 关联 趋势和逻辑 拖拽式操作 满足大部分连接方式 支持大数据连接方式 关系型数据库 文件形式 简单交付 极致易用 软件可在几分钟内安装完成 直接基于细节数据制作分析报表 漂亮的定制化
9、大屏效果 使用Gis工具和可视化组件定制化开发 移动跨屏 无缝支持PC iPhone iPad和Android 令人惊讶的高性能 利用列存储和内存计算 实现数据分析的秒级响应 子产品介绍 VDV系统展示 连接数据 编辑数据 查看报告 定时任务 子产品介绍 Vigor DeepMiner 数据深度挖掘平台 Vigor Deep Miner基于Vigor data大数据平台之上具有完备的数据准备 数据处理 算法管控 模型管控 模型管理和结果展现功能 具有系统性 开放性 流程性和服务性等特征 可以帮助企业从业务数据中挖掘规 律 并对关键问题做出预测 并可以应用模型部署到业务流程中 提高决策效率和执行
10、力 子产品介绍 VDM系统展示 子产品介绍 Vigor Data Platform 数据处理平台 VigorData Platform是一个跟具体行业业务无关的 通用性的基于大数据的管理分析工具化产品 通过这个 产品所具备的高性能实时和离线计算能力 丰富的统计 分析 挖掘模型 为行业全流程 全周期的生产运营 活动提供商业智能支持 子产品介绍 VDP系统展示 子产品介绍 Vigor Data Integration 数据采集平台 VigorData Intergration采用元数据驱动的方式提供强大的数据抽取 转换和加载能力 适配多种数据源 DB 文件 log 数据流 适配多种数据抽取方式 离
11、线 实时 提供了直观的图形界面设计器 大大缩短数 据预处理的开发周期 并且容易维护 设计界面友好 提供了工作流设计模式 能满足各种场景的实现 子产品介绍 VDI系统展示 公司介绍 一 大数据的发展与价值 二 微构大数据平台介绍 三 目录 Contents 产品特性与优势 四 案例介绍 五 产品特性与优势 1 产品特性与优势 2 公司介绍 一 大数据的发展与价值 二 微构大数据平台介绍 三 目录 Contents 产品特性与优势 四 案例介绍 五 同策数据中心 同策咨询积累了海量的用户数据和楼盘数据 但这些数据缺乏有效的从生产 采集 存储 计算 分析及可视化的全流 程的支撑体系 企业外部业务的竞
12、争拓展和内部精细化经营 对数据能力和价值利用也提出了更迫切的要求 同策数据中心整体架构 同策数据中心建设的价值 同策数据中心系统截图 解决了数据孤岛的问题 实现了同策内部数据的汇聚 解决了数据格式等问题 实现了数据的实时导入和数据 格式的标准化 构建了房地产行业数据模型 实现了大数据场景的落地 可为自有和第三方行业用户提供数据服务 同策经分系统 经分系统建设驱动 同策咨询目前通过EXCEL手工填报的方式输出月度经营 汇报所需报表 缺乏满足业务人员自定义报表的工具平台 业务新增报表及 修改工作需要IT部门的支持 消耗人力多 周期长 数据时效性和准确率得不 到保障 目前已经进行财务主题调研 梳理出
13、基础大表 107项栏目 财务月报中所涉猎的七大分析主 题涉及到的各项指标所对应的数据类型 数据 来源 关联规则 计算公式 分析逻辑 报表示 例如下 同策经分系统整体架构 MASA房地产大数据营销平台 系统建设目标 MASA房地产大数据营销平台整合B端市场数据和C 端客户数据 基于微构大数据平台进行数据处理分析 通过市场分 析 竞品分析 客户分析 人房匹配 潜客挖掘等 为房地产从业人 员提供专业的市场情报 并为案场工作人员提供营销决策支撑 房地产大数据营销系统整体功能架构 电科院大数据平台 电科院作为电力行业多学科 综合性的科研机构 携手微构力争打造一套具备电力行业特性的多元化数据统 计 分析
14、挖掘的大数据平台 以应对信息化飞速发展的新潮 国家电网大数据应用 配电变压器负荷超载预警 大数据应用产生的效益 大数据平台根据用户负荷的变化规律 天气等影响因素 可以预测配电变压器未来负荷增长情况 对可能超载 的配变进行提前告警 同时 通过对海量多源异构数据的整合分析 系统实现对现场故障的速报与抢修 完善 和补充了现有抢险指挥平台及生产管理系统的功能 保障了智能电网安全 自愈 绿色 坚强及可靠运行 当配变已经出现超载时 省公司的相关监控专责会将超载信息通过短信的形式传达给相关供电公司的 专责 通知其进行处理 在这种情况下 由于时间的延误很可能造成处理不及时导致设备损毁 业务 背景 配网 抢修
15、视频智 能监控 设备现 场管理 预警信 息同步 设备运 行管理 故障速 报定位 现场验 收勘察 管理 结构化数据 非结构化数据 GIS数据 时标数据 电杆的杆型 投产日期 杆上设备信息 安装人信 息等 安检系统摄像对异动情况 监测的相关图片 视频数 据等 异动情况位置信息 轨迹 信息 杆塔坐标等 大用户及公变台区总表表 计四种功率类型对应的总 尖 峰 平 谷电能窗 口值等 国家电网大数据应用 用电信息采集系统 大数据应用产生的效益 用电信息采集系统实现对智能电能表等计量设备的各类电能数据的数据实时采集 双向分时段计量 远程参数配置与 通断控制 电能质量监测 窃电侦测 停电检测 双向通信等功能
16、同时 在客户信息系统支持下实现客户用电服 务 电价及费率自动调整 用户需求侧响应 对采集的海量用电数据做出实时计算 分析和统计 用户对电费的承担能力主要由用户的经营状况和用户信用决定 用户欠费的原因可能是由于市场经济发展 产品不适应市场 需求造成经营困难 在短时间内出现资金流短缺无力支付电费 或者企业破产 改制过程导致欠费 随着企业不断生产 利 润空间有限或者信用欠缺 形成大欠费 最终形成呆账坏账 损害供电企业利益 业务 背景 测点数 3000万 采集频率 每15分钟 采集一次 一天采集96次 数据量 每天数据量为 3000万 96 288000万 约为300G 数据 类别任务原系统大数据 方案 计算 任务 公变数据完整率之今日电量 计算 67分钟2 4分钟 低压数据完整率计算87分钟15分钟 低压用户电量计算191分钟12分钟 查询 任务 台区线损分析明细查询1 485秒0 328秒 采集质量检查明细查询5 547秒0 281秒 终端通信状况明细查询1 719秒0 484秒 南网数据中心 南方电网企业数据中心积累超过150TB业务数据 当前数据中心架构在海量数据资产的管理和应用方面初
