《集群容量规划探索53p》由会员分享，可在线阅读，更多相关《集群容量规划探索53p（53页珍藏版）》请在金锄头文库上搜索。
1、集群容量规划探索 什么是容量？ 通俗的理解就是资源所能支撑特定服务的能力什么又是容量规划？ 就是资源管理什么样的集群是我们今天容量规划讨论的对象？ 同构集群性能解决的是一辆 车能装多少容量解决的是需要 多少辆车容量和性能小结和闲聊 评测模型 应用依赖 趋势预测 容量管理 寻道时间磁盘空间服务指标容量指标B 设定容量指标C压测和监控A 设定服务指标评测模型 D 容量计算A设定服务指标宝马新0-1003系0-100码加速 6.1S方向盘式 拖拉机：码加速？业务需求SLA设定服务指标用户期望监测那些可以成 为服务指标？SLA计算速度网页打开速度响应时间（RT）命中率B 设定容量指标容量指标介绍先思考
2、下日常容量调整的类型: 水平调整 垂直调整容量指标介绍C 压测和监控全国人民都看到结果的压力测试压力测试 测试效果受到集群实际流量限制引流模拟流量 压测时间需要选择流量较大时 不产生脏数据，适用范围灵活 测试效果不受集群实际流量限制 压测时间灵活 可能产生脏数据，对get型请求较为合适ZenOssOpenNMSMRTGZabbixNagioscacti用什么监控系统可以选择，只 要能持续收集容量指标的变化监控选择Ganglia阿里巴巴Dragoon监控系统D 容量计算去年淘宝的双十一后集群容量 =容量指标峰值容量指标最大安全值板 #$%& 偶是老板，想知道交易WEB集群容量！又要加班，万恶的老
3、遵命，保证完成任务！来看一个实际的案例 总结下评测模型 ！系统指标CPU利用率DISK IOPSBandwidthMemory Used健康标准80%200800Mbps4G开工！一个交易 WEB集群服务指标：交易关键URL响应时间 300ms水平容量指标：TPS系统健康约定如下TPSTPSDisk I100O 10结论RT232 msCPU55%Disk IO23 同时发现，CPU随着业务量变 2.12G 变化的MemoryCPU 83%Network Bandwidth5.2Mbps Memory2.14G权重143 221 ms从监控和日志中得到信息 RT 当服务指标RT值超过300ms
4、 32% 候，CPU 时值为 Memory 2.11G 最近一个星期集群最大峰值TPS为160Network Bandwidth 2.5Mbps权重 2123111111111RT s 100=400TPS 72 权重 3 TPS 110 经过压测集群最大TPS 4 366 m化而 Disk IO 45 最明显，可以作为集群的垂直度量指标Network 量andwidth100%= 7.8Mbps 集群容 B=160/400 40%交易WEB负载均衡集群被压测服务器评测模型 应用依赖 趋势预测 容量管理 小结和闲聊 （ 前容 40% 1.平时关 应用的容量，及时扩容！当 量 ） 注活动， 时交
5、易将会增加2倍哦！ 40% 务 负 过 而 棒 交 升了 么 了？ 2.容量评测不是孤web市场 进 大 2 = 80% 机 应 间的依赖！集群 ！ 量会 大提 立 ， 注当前交 导致 易 大 的 意 用x 宕 交要挂载 大易Web集群集群容量为40% 提个需求： 型 定，交易正常 届 怎交易WEB集群交易服务集群 （容量90%）经过排查，由于交易Web集群 务集群。因交交易 系统稳问题，请放心 无WEB木有也因Load过高 容量集群 法响应需求！市场部反馈，交易量翻倍增长！然而，却突现大量机器报警 。调用交易服 好的，老板。 易服 年终奖别想要了 ！ ！动态依赖 应用层-应用日志分析 架构层
6、-服务治理框架 系统层-网络分析静态依赖 代码层-应用程序包 配置层-应用配置项应用依赖集群X被其他集群生 3.3.3.1.64424口 4.4.4.4.80: 的比例基于80端 调用： tcp 0启动数据采集4.4.4.0/24 IP 2.2.2.1.64420 4.4.4.4.80: tcp tcp 0IP3.3.3.2.64426 4.4.4.4.80: tcptcp 0 tcp 0IP 1.1.1.1.64415 4.4.4.4.80:2.2.2.1.64420 4.4.4.4.80: 0 30% IP IP 2.2.2.2.64421 4.4.4.4.80: 集tcp tcp 群A
7、0 0 tcp tcp 0 040%IP 1.1.1.2.64417 4.4.4.4.80:2.2.2.2.64421 4.4.4.4.80: IP 1.1.1.2.64417 4.4.4.4.80: IP 2.2.2.2.64421 4.4.4.4.80: tcpB 308集群tcpIP 3.3.3.3.64427 4.4.4.4.80: tcpC 0IP 2.2.2.2.64421 4.4.4.4.80: 4.4.4.4.80: tcp 30%IP3.3.3.4.64429 4.4.4.4.80: tcptcp 308401IP 2.2.2.3.64423 4.4.4.4.80: 0 IP
8、3.3.3.4.64429 4.4.4.4.80: tcptcp 0 tcp 0IP 2.2.2.3.64423 4.4.4.4.80: 0 IP3.3.3.4.64429 4.4.4.4.80: tcptcp 0 tcp 0IP 2.2.2.3.64423 4.4.4.4.80: 3081.1.1.0/24集群B 2.2.2.0/24集群C 3.3.3.0/24发起请求 起 于 端 的 求集群X IP 2.2.2.1.64420 4.4.4.4.80: tcp 308401B C 网 为 机 3.3.3.0/24集群 A： ： 网 段 段 为 1.1.1.0/24的 的 机 器 器 集 X
9、IP 为 机向 向 集 群 群 X ： ： IP 为4.4.4.4的 的 机 器 器 发 发 起 基 基 于 80 80 端 口 口 的 TCP请 请 求 集群AIP 3.3.3.1.64424 tcptcp 0 1.1.1.1.64415 IP 3.3.3.1.64424 tcptcp 0 1.1.1.1.64415 3.3.3.1.64424 tcp 0 tcp IP 1.1.1.1.64415 IP 3.3.3.3.64427 tcptcp 0 1.1.1.2.644173.3.3.3.64427 tcp 0 0 IP 1.1.1.3.64418 IP 3.3.3.3.64427 tcp
10、 1.1.1.3.64418 0生成的tcpdump日志：IP 成的tcpdump日志 IP 3.3.3.1.64424 4.4.4.4.80: tcp 0 IP 2.2.2.1.64420 4.4.4.4.80: 401 tcp 0 IP 2.2.2.1.64420 4.4.4.4.80: 0 tcp 0IP 3.3.3.2.64426 4.4.4.4.80: tcp 0 IP IP 3.3.3.2.64426 4.4.4.4.80: tcp 308 IP 3.3.3.2.64426 4.4.4.4.80: tcp 0 IP 3.3.3.2.64426 4.4.4.4.80: tcp 0 I
11、P 1.1.1.2.64417 4.4.4.4.80: 401 IP 2.2.2.2.64421 4.4.4.4.80: 0 tcp 0 tcp 0 IP 3.3.3.3.64427 4.4.4.4.80: tcp 401 IP 2.2.2.3.64423 4.4.4.4.80: tcp tcp 0 IP 2.2.2.3.64423 4.4.4.4.80: tcp tcp 0 IP 1.1.1.3.64418 4.4.4.4.80: tcp IP 1.1.1.3.64418 4.4.4.4.80: IP 1.1.1.3.64418 4.4.4.4.80: IP 3.3.3.4.64429 4.
12、4.4.4.80: tcp 0 IP 3.3.3.4.64429 4.4.4.4.80: tcp 0运维集群应用依赖系统20881 20880容量管理 小结和闲聊 趋势预测 评测模型 应用依赖 iphone5发布了，想知道 iphone20是什么样子吗？TPS上限：1000把上述过程自动化趋势预测趋势预测必须不断的校准，才会有更好的 预测效果！12345678910111213141516WEEKCur小结和闲聊 评测模型 应用依赖 趋势预测 容量管理 自动化平台化标准化自动化自动化容量管理 其他运维自动化系统联动平台化提供可视化管理容量管理标准化数据源标准 配置标准计算方法标准容量阀值对容量控制的力度应用的特点机
