大数据系列之大数据分析对it资源的需求

《大数据系列之大数据分析对it资源的需求》由会员分享，可在线阅读，更多相关《大数据系列之大数据分析对it资源的需求（5页珍藏版）》请在金锄头文库上搜索。

1、大数据系列之大数据分析对 IT 资源的需求在系列 1 里，中桥就大数据分析对未来 24 个月以及企业的大数据分析投入重点进行分析。在系列 2 里，中桥将就大数据分析对 IT资源的需求，包括 IT 架构、计算节点以及存储技术等进行分析。大数据分析对 IT 架构的需求在大数据时代，随着数据存储量的爆炸性增长以及分层网络架构的出现，IT 复杂性达到了前所未有的高度，而大数据分析使得传统 IT 架构更是不堪重负。那么从企业角度来看，他们的大数据环境需要怎样的 IT 架构呢?中桥调查结果表明(图 1)，企业级用户(员工人数在 1000 人以上)主要选择的是“透明、经济、智能、自动化”的 IT 架构(29

2、.3%)，中小企业(员工人数在 1000 人以下)则主要选择的是一体机方案(服务器、存储、网络、大数据分析软件)(28.9%)。企业级用户倾向于开放、异构、跨平台的 IT 架构，因为其用于大数据分析的 IT 架构发展较为成熟，如何继续提高 BI 效率是企业级用户选择 IT 架构的重点。中小企业尚处于 IT 架构发展初期，因此一体机的方案成为中小企业的首选。受访者的选择结果也体现了中国企业未来对 IT 架构的需求趋势，说明数据整合和 ETL 是中国企业的迫切需求，也是目前面临的最大问题之一。图 1. 大数据环境对 IT 架构的需求大数据分析对计算技术的需求再从大数据分析的计算方式来看(图 2)，

3、21.6%和 21.3%的企业级用户分别考虑 x86 虚拟化和小型机来部署大数据分析方案，中小企业(23.8%)则主要考虑刀片服务器的计算方式。刀片服务器的高密度特点有利于提高计算能力、保持高 IT 密度。企业级的应用多数运行在小型机的平台上，这造成如果大数据分析是在现有基础上实现，则小型机就成为了企业级的首选;如果要选择在一个全新平台实现大数据分析，那么 X86 虚拟化就成为了企业级用户的第一选择。结合我们之前所分析的，目前中国市场的大数据分析速度和频率远低于欧美市场，这导致中国企业在数据分析，这个大数据通过 IT 创造价值，这一重要环节上比较薄弱。图 2.大数据分析对计算技术的需求大数据分

4、析对存储的需求从大数据分析的第一个环节数据收集和存储来看，大数据时代应用数量、应用数据量和使用者数量的增长，对存储 IOPS 以及 OLTP 和 OLAP 的要求越来越高，具体体现在存储不能满足业务关键型应用的需求。从中桥就企业支持当前数据分析和/或进程活动的存储类型分析来看(图 3)，FC SAN 是企业级用户(42.1%)和中型企业(34.0%)的首选，远高于其他存储类型的企业占比。这是因为FC SAN 对 OLTP 和 OLAP 的性能稳定性优于其他存储技术。这一调查结果也体现了，目前中国用户大多处于大数据分析的第一阶段，存储和 IT 架构大多以集中式为主。随着 Hadoop 和 Map

5、Reduce的不断普及，用户逐渐进入近实时和实时分析阶段，节点式存储的占比会随之逐渐增加。图 3.大数据分析对存储的需求那么在大数据时代企业的存储能够满足需求呢(图 4)?中桥调研结果显示，31.6%的用户计划在未来 12 个月部署新存储来满足业务关键型应用的需求，33.2%计划在未来 12-24 个月部署新存储。这表明传统存储越来越无法满足业务关键应用的性能需求。在未来24 个月，64.8%的用户将会部署新存储来满足大数据时代，业务关键型应用对存储性能越来越高的需求。图 4 大数据分析时代存储的发展趋势通过上述一系列大数据对 IT 资源的需求分析，中桥分析师认为，传统的 IT 架构、计算方式以及存储正成为中国用户通过大数据分析处理快速提高 IT 效率，挖掘数据价值的巨大阻碍。而统一、透明、智能的自动化 IT 架构管理、高密度下卓越的计算能力，以及能够满足存储 IOPS 与 OLTP 和 OLAP 的新型存储则能够为企业创造价值，实现通过 IT 突破创新来提升企业竞争力的目的。