《CS、CSS架构应用的软件性能测试模型分析》由会员分享,可在线阅读,更多相关《CS、CSS架构应用的软件性能测试模型分析(14页珍藏版)》请在金锄头文库上搜索。
1、安博测试空间技术中心http:/ 62303260 62303230CS/CSS架构应用的软件性能测试模型分析作者:夏海涛1. CS/CSS系统架构的基本概念1.1系统架构定义虽然B/S结构、J2EE架构愈来愈成为流行模式,但基于传统的C/S结构的应用程序还广泛地应用于各种行业。尤其是金融行业中的商业银行柜面核心帐务 系统等。一方面由于传统商业银行一般都有大量的字符终端等需要复用的设备,一方面也是因为他们存在大量密集的对实时性要求很高的高柜业务,使用传统的基于 C/S结构或者C/S/S结构的应用效率更有保证。C/S结构即CLIENT/SERVER结构。传统的C/S结构一般分为两层:客户端和服务
2、器端。该结构的基本工作原理是,客户程序向数据服务器发送 SQL请求,服务器返回数据和结果。客户端负责实现用户接口功能,同时封装了部分应用逻辑。服务器端的数据库服务器主要提供数据存储功能,也通过触发器和 存储过程提供部分应用逻辑。C/S/S结构即客户/应用服务器/数据库服务器三层结构,中间增加了应用服务器,通常实现应用逻辑,是连接客户与数据库服务器的桥梁。它响应用户发来的 请求执行某种业务任务,并与数据库服务器打交道,技术实现上通常选用中间件产品,如BEA公司的TUXEDO和IBM公司的CICS等。(事实上J2EE 架构的应用也属于这种三层或多层结构,这里不包括。)三层或多层C/S结构与两层C/
3、S结构相比,它的优势主要表现在:安全性加强、效率提高、易于维护、可伸缩性、可共享性、开放性好等。1.2系统架构示意图1.3CS/CSS系统架构中性能测试的特点1.3.1CS/CSS系统架构的性能影响因素由于CS/CSS系统的以下特性,测试工程师对一个CS/CSS系统实施性能测试具有很大的难度:*整个系统的各个部分使用多种操作系统,性能上有差别;*整个系统架构的各个环节上使用多种数据库,同样在性能上有差别;*应用是多个,分属多个种类,分布在不同设备上,包括自行开发的应用、第三方的应用;*系统中的设备、组件通过不同协议进行连接、通讯;*系统的内部接口多,性能瓶颈多;而系统的整体性能往往取决于最差的
4、部分;需要分别测试和联合测试*系统的性能指标不光同应用系统架构有关,还和具体行业应用的业务模式有关;*采用此架构的行业应用往往是一个724小时系统;*采用此架构的行业应用可能高柜业务多,这样会影响对性能度量项的选取和转换;*各个环节基本上以交换数据报文的方式通信,其格式经常会比较复杂。因此这样的系统对于对测试工程师的知识的深度和广度都是一个考验。对于这样的系统,到底如何使用什么样的测试策略、如何分析测试需求、如何选取性能度量项 的转换计算模型、如何确定测试内容和轮次、如何设计性能测试案例等等以及规划和实施性能测试中的其它诸多问题,都需要遵循一个系统的方法来解决。1.3.2CS/CSS系统架构中
5、性能测试的基本策略1. 确定好测试工作范围首先可以分析压力测试中最容易出现瓶颈的地方,从而有目的地调整测试策略或测试环境,使压力测试结果真实地反映出软件的性能。例如,服务器的硬件限制、数 据库的访问性能设置等常常会成为制约软件性能的重要因素,但这些因素显然不是用户最关心的,我们在测试之前就要通过一些设置把这些因素的影响调至最低。另外,用户更关心整个系统中哪个环节的性能情况也会影响工作范围。如有的环节是全新系统,而有的环节已经是成熟系统只是稍有改动,这样可能全新系统的局部性能测试就需要系统和全面一些。2. 分析好客户的性能测试需求客户是已经明确提出了性能指标,还是只提供了用户使用方式和历史交易流
6、量数据,需要我们自己进行性能基准的计算?性能测试的目的是验证系统性能还是想确定 目标系统的理想配置?是否还要使用测试结果预测在不同机型的处理能力?是否要求在性能测试各个轮次中安排性能调优过程等等问题都需要有针对性的解答。3. 要作好性能测试的计划和方案测试计划和方案中要注意测试需求分析阶段提出的问题的解决。4. 确定的测试通过准则、性能测试的计划、结果要获得客户的认可要和客户确认,系统的性能指标达标的标准是什么;对于性能测试中各个部分和步骤的计划和结果,甚至是性能测试过程,都要根据其重要程度,决定是否需要客户进行确认和签字。获得客户的认可是最重要的。1.3.3CS/CSS系统中性能测量与性能探
7、测性能测量1. 在性能测试开始前必须认真规划性能测量:软件性能测量技术范围很广。可以包括日志、事件计数、事件持续时间、采样等性能测量技术。*确定性能测量的策略:我们要测试什么?*规划性能测试中使用什么样的测量工具。2. 测量的代表性*测量结果要能够反映出影响性能的重要因素:工作量负载、软件和计算机系统环境。3. 测量的可重复性*能够控制工作量负载、软件和计算机系统环境,从而能够重复测试过程。性能探测技术在进行性能测量时,可以使用标准的商用工具进行,但是往往标准工具提供的数据不能满足要求。性能探测就是在程序的关键点插入代码探针来测量软件的执行特性。从而达到以下的目标: 性能数据获取更方便 数据的
8、详细程度提高 数据收集方式更加可控依据SPE(软件性能工程)的建议,软件探测需求应该作为软件体系结构的组成部分。在设计软件时设计软件探针。所以在规划项目中的性能测试过程中,要建议进行软件设计时考虑岛性能探测需求,为性能测试中更好的进行性能测量做好准备。1.3.4CS/CSS系统下性能测试的类型广义的性能测试包括许多类型。如:*Scalability/load testing (规模化/压力测试) :通过在被测系统上不断增加压力,直到性能指标例如响应时间超过预定指标或者某种资源已经达到饱和状态。这种测试可以找到系统的处理极限,为系统调优提供数据。*Performance testing (性能测
9、试):通过模拟生产运行的业务压力量和使用场景组合测试系统的性能是否满足生产性能要求。如以实际投产结构测试,求出最大的吞吐量与最佳回应时间以保证上线的平稳,安全等。*Configuration testing(配置测试):通过测试找到系统各项资源的最优分配原则。*Concurrency testing(并发测试):测试多个用户同时访问同一个应用、同一个模块或者数据记录时是否存在死锁或者其他性能问题。*Stress testing (极限测试):测试系统在一定饱和状态下,例如CPU、内存在饱和使用饱和情况下,系统能够处理的会话能力,以及系统是否会出现错误。*Volume testing (容量测试
10、):测试系统能够处理的最大会话能力。*Reliability testing (可靠性测试):通过给系统加载一定的业务压力(例如资源在70-90%的使用率)的情况下,运行一段时间。*Failover testing (失败测试):对于有冗余备份和负载均衡的系统,通过这样的测试来检验如果系统局部发生故障用户是否能够继续使用系统,用户将受到多大的影响。在CS/CSS系统下实际的性能测试中,需要根据具体情况进行性能测试类型的选取和组合。1.3.5CS/CSS系统下性能测试的组成部分通常在一个CS/CSS系统中,分为用户界面层、服务逻辑层和数据服务层等几个层次,分别对应着客户、应用服务器、数据库服务器
11、。如在金融行业应用中,客 户端承载着柜面业务,部署在网点(包括字符柜员或图形柜员),还包括部署在自助设备上面的自助业务等;应用服务器上面主要是起到路由功能、业务处理功能、 和渠道整合的作用;而核心业务处理系统包括交易平台、业务逻辑、核心处理、数据处理等。由于业务逻辑分布在不同的环节,导致系统的内部接口多,性能瓶颈多,而系统的整体性能往往取决于最差的部分。所以对于整个系统的整体性能的测试可能需要针对各个环节分别做好各自的内部性能测试。如下面的一个CS/CSS系统金融行业应用的例子:为了测试整个系统的性能,需要预先针对各个组成部分进行内部性能测试,如后台主机的压力测试、SNA gateway的压力
12、测试、大前置系统的压力测试、前端系统的压力测试、外系统接入的压力测试等等。在本次进行的内部压力测试中,为了排除系统其它部分的影响,均需要隔离各自的部分,驱动和桩都使用软件测试工具或自行编制程序来代替。在每个部分的内部压力测试中,又均可以根据具体情况使用上一节说明的各种性能测试类型进行性能测量。2. CS/CSS系统架构中的性能测试的度量项计算模型2.1 定义度量标准项进行性能测试的模型分析时,首先要确定关键性能目标。它应该是通过与客户沟通获得的,这些目标应该是解决客户关注的性能问题,也就是说,客户的性能测试需求体现为关键性能目标。性能目标应该是明确的、可度量的。例如:支持2000个并发用户;连
13、续运行30天不停机等。在明确了关键性能目标和性能测试的通过/失败准则后,需要定义如何度量关键性能目标和性能测试的通过/失败准则。度量的标准项会影响测试方法和测试工具的选择。举例来说,如果要度量100个用户并发的响应时间,就必须明确要度量以下哪一个标准项:*每个并发用户的响应时间*在有99个用户已经接入的情况下,第100个用户的响应时间*两个指标都要度量2.2 性能基准及测试强度估算实际上,关键性能目标并不总是很容易明确的。客户往往只有一些历史数据和业务增长的一些预期比例等等。但是这些数据对于我们也是很有用的,它们可以作为我们设计和测试使用的性能基准。对于性能测试,在设计时就要首先提出设计的性能
14、基准。所谓性能基准,就是要思考:多少人使用这个系统?使用时最大的用户数是多少?用户高峰期使用时间间隔 多少,在多大数量级别上系统响应时间分别是什么?数据增长量有多大?数据增长到什么数量级和时间长短对硬件而言难于承受?网络实现条件是什么?在处理时 CPU和内存增长如何控制?种种这些,然后设计时根据性能基准有条件的在编码实现和硬件配置方面进行优化,测试只不过验证系统是否达到预期设计目标。但是现在的情况却往往是:设计出来后要求性能测试,测试什么然后是什么,好比考试没有标准答案却要求大家及格一样。或者是,客户虽然已经明确的提出了关键 性能指标,但是设计的时候没有考虑,依赖于性能测试给出实际性能数据,然
15、后再对比优化。性能测试在基于性能基准上,特别是基于经过计算和转换得到的关键性 能目标,才能得出预期结果。这一点,需要测试工程师向设计人员反复灌输这种观念,否则,性能测试研究包括工具研究总是停留在讨论阶段。不要在编码完成以后 才考虑优化问题,如果等项目实施了,优化还没有完成,就很难保证客户满意。没有目标的设计,如同城市间的交通问题一样,我们抱怨建设者们缺乏远见,而软件设计人员同样缺乏想象力。对于性能基准向关键性能目标的转化,用以下例子来说明。有200个用户使用客户端软件进行业务处理(并发度至少要达到200并发),每年通过软件进行处理的总业务量为:2000万笔业务/年。测试强度估算时采用如下假设前提:*全年的业务量集中在10个月完成,每个月20个工作日,每个工作日8个小时;*采用8020原理,每个工作日中80%的业务在20%的时间内完成,即每天80%的业务在1.6小时内完成;测试压力的估算结果:去年全年处理业务约2000万笔,其中15%的业务处理每笔业务需对应用服务器提交3次请求;70%的业务处理每笔业务需对应用服务器提交2次请求;其余 15%的业务每笔业务向应用服务器提交1次请求。根据以往统计结果,每年的业务增量为15%,考虑到今后三年业务发展的需要,测试需按现有业务量的2倍进 行。