Benchmark性能测试综述

《Benchmark性能测试综述》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、万方数据Benchmark性能测试综述王良(中国人民大学计算机科学与技术系，北京100872)摘要基准(Benchmark)潮1试是一种应用广泛、内容繁杂的测试技术，也是目前最主要的信息系统性能测试技术。文章对Benchmark测试的规范和测试方法做了归纳总结．给出了选用Benchmark测试的建议和开发Benchmark测试规范需要解决的问题。最后介绍了有代表性的Benchmark测试规范和程序集。关键词基准测试测试性能文章编号1002—8331一(2006)15—0045-04文献标识码A中图分类号TP311SummaofBenchma

2、rkPerformanceTestWangLiang(DepartmentofComputerScienceandTechnology，RenminUniversityofChina，Beijing100872)Abstract：Asatestingtechnologywidelyappliedandincludedmultifariouscontents，abenchmarktestingispfimaryimportanceforevaluatingperformanceofinformationsystems．Thispapersum

3、marizesspecificationsandtestingmethodsofbenchmarktesting，andputsforwardforselectingitfromanumberofbenchmarktests．Finally，typicalbenchmarkspeci-ficationsandtestingsoftwaretoolsareintroduced．Keywords：benchmarktest，test，performance1引言Benchmark作为一种评价方式．在计算机领域有着长期的应用。Benchmark，

4、一般译成基准或标杆，按牛津百科全书的解释，Benchmark是指测试人员在岩石、混凝土立柱等上面刻下的标记，用以测量相对高度等，也称(供比较参照之用)样板或参照点。Benchmark测试的着眼点是测试结果的可比性。即按照统一的测试规范(testspecification)对被测试系统进行测试，测试结果之间具有可比性，并可再现测试结果。1．1应用领域Benchmark测试在计算机领域中最广泛和最成功的应用是性能测试，主要测试响应时间、传输速率和吞吐量等。此外．它也用于功能、可操作性和数据处理开发易用性等方面的测试【l

5、。按照Benchmark

6、的思想，它还可以有更广泛的用途。但目前性能以外有影响的Benchmark测试很少。Benchmark测试有些偏重于硬件．有些偏重于软件．还有些注重整个系统。在硬件方面广泛应用于评价CPU、内存、I，o接口和外围设备的性能．主要测试两个方面性能指标：一是硬件传输数据的带宽，称为带宽基准测试(Bandwidthbenchmark)；二是数据传输的延迟，称为延迟基准测试(Latencybenchmark)。在软件方面，它用于评价操作系统、数据库和中间件以及应用软件的数据处理能力。1．2作用Benchmark测试对生产商和用户都很有价值。对生产厂商

7、的作用是为产品进行市场宣传和发现系统的瓶颈；对用户的作用是指导产品的选择。Benchmark测试最具吸引力的特点就是一个好的Benchmark测试对于某一领域的技术发展有积极的导向作用．它会引导生产厂商采用新技术改进产品。选择Benchmark测试时需要有明确的目的．当用于产品宣传时。就应该选用权威机构的Benchmark测试，并且结果得到其认可。而用于指导产品选择的Benchmark测试，则需要清楚Benchmark测试的结果是否与应用的特性有密切的关系。Benchmark只能模拟一定的应用环境，不可能适用所有情况。Benchmark测试

8、也会带来消极的影响，如生产厂商可能会相互攀比测试结果．一味地追求高指标．而忽略了实际应用的需要。因此．好的Benchmark测试就是引导厂家和用户向正确的方面努力。2选用Benchmark测试规范2．1规范来源Benchmark测试发展了20多年，至今仍方兴未艾，许多组织和个人从事这方面的研究和开发。众多的Benchmark规范或测试程序集为了不同的目的、产生于不同的背景．归纳起来有如下形式：(1)权威组织制定的测试标准或开发的测试程序集。它们的测试标准、测试程序和测试参数及测试报告都是公开的，如SPEC、Linpark和TPC组织的11P

9、C系列等。(2)媒体机构开展的测试。一般由媒体机构建立测试实验室，组织测试。测试对象一般是大众电子类产品，测试规范和测试程序不一定由测试机构开发．测试结果发布在媒体的专栏上。如P