数据库性能测试方法讨论

1、数据库性能测试方法讨论发布时间: 2008-5-04 16:18    作者: 陈嘉祥 王治 方耀等    来源: 51Testing投稿字体:  小  中  大  | 上一篇 下一篇 | 打印  | 我要投稿  | 每周一问，答贴有奖         摘要：在LOADRUNNER中使用脚本和JAVA程序进行数据库性能测试。        关键词：LOADR

2、UNNER，JAVA, Benchmark一、 前言        在测试工作中经常需要对数据库进行性能测试，以对数据库进行调优，保证数据库的稳定和高效。        本文使用常用的性能测试工具LOADRUNNER，JAVA和专用数据库性能测试工具Benchmark，讨论数据库性能测试的不同方法，希望能抛砖引玉，寻找出更新更好的方法。二、 任务引入        数

3、据库性能测试的需求，一般来源于下面几个方面：1、 数据库调优；2、 数据库选型；3、 数据库服务器选型；4、 其他；下面，就针对于这些常用的需求，列举几个不同的实例，共享一下测试方法。1)  LOADRUNNER应用        测试任务：评估某项目的核心业务逻辑（数据查询、数据复用、抽取同步整合）在不同压力下的性能表现，判断系统瓶颈，得到最优系统配置参数和建议，并为数据库的试运行工作提供可靠的性能可行性依据；     &#

4、160;  数据查询性能指标：900个用户并发，平均响应时间在3秒以内；        数据库性能测试需求：数据库调优或服务器选型；include "lrd.h"Action()static LRD_INIT_INFO InitInfo = LRD_INIT_INFO_EYECAT;static LRD_DEFAULT_DB_VERSION DBTypeVersion =        LRD_DBTYPE_NONE, LRD

5、_DBVERSION_NONE;static void FAR *       OraEnv1;static void FAR *       OraSvc1;static void FAR *       OraSrv1;static void FAR *       OraSes1;static void FAR *   &

6、#160;   OraStm1;unsigned long           rownum;lrd_init(&InitInfo, DBTypeVersion);lrd_initialize_db(LRD_DBTYPE_ORACLE,3, 0);lrd_env_init(LRD_DBTYPE_ORACLE, &OraEnv1, 0, 0);lrd_ora8_handle_alloc(OraEnv1, SVCCTX, &OraSvc1, 0);lrd_

7、ora8_handle_alloc(OraEnv1, SERVER, &OraSrv1, 0);lrd_ora8_handle_alloc(OraEnv1, SESSION, &OraSes1, 0);/连接数据库lrd_server_attach(OraSrv1, "vmvare_7", -1, 0, 0);lrd_ora8_attr_set_from_handle(OraSvc1, SERVER, OraSrv1, 0, 0);/设定数据库密码lrd_ora8_attr_set(OraSes1, USERNAME, "us

8、ername", -1, 0);lrd_ora8_attr_set(OraSes1, PASSWORD, "password", -1, 0);/初始化连接sessionlrd_ora8_attr_set_from_handle(OraSvc1, SESSION, OraSes1, 0, 0);/开始连接数据库lrd_session_begin(OraSvc1, OraSes1, 1, 0, 0);lrd_ora8_handle_alloc(OraEnv1, STMT, &OraStm1, 0);/设定查询语句lrd_ora8_stmt(OraStm1,

9、"SELECT * FROM T_TASK_ALARM_TYPE WHERE TYPE_CODE=7", 1, 0, 0);/执行查询语句lrd_ora8_exec(OraSvc1, OraStm1, 0, 0,&rownum, 0, 0, 0, 0, 1);/释放连接数据库的各种变量lrd_handle_free(&OraStm1, 0);lrd_session_end(OraSvc1, OraSes1, 0, 0);lrd_server_detach(OraSrv1, 0, 0);lrd_handle_free(&OraEnv1, 0);/lrd

10、_end(0); return 0;        上面的LoadRunner脚本在Virtual User Generator调试通过后，在Controller中打开，用900个模拟用户并发测试，即可得出性能指标（LoadRunner的操作这里就不在赘述，google一下）。        从上面的例子看出，此应用比较难懂，是LoadRunner专属的方法，而且可扩展性不强。如果再遇到其他类型的数据库测试，协议将会是一个很大的问题。所以，为了容

11、易理解，可扩展性强，引出了下面的JAVA应用方法。2) JAVA应用        测试任务：测试待选的数据库的性能；        数据查询性能指标：20个用户并发，每秒执行增删改语句数不少于1000条；        数据库性能测试需求：数据库选型；import java.sql.*;import java.util.Date;import java.util.Proper

12、ties;public class testsybase     String sDbDriver = "com.*.*.*.*"    String sConnStr = "jdbc:*:*:ip_adress:port/sid"    private Connection conn = null;    private Statement stmt = null;    ResultSet rs = n

13、ull;    public testsybase()          try           Class.forName(sDbDriver);        catch (java.lang.ClassNotFoundException e)       &#

14、160;     System.err.println("testdb():" + e.getMessage();                public void executeUpdate()              stmt = null;   &

15、#160;     rs = null;         try              conn = DriverManager.getConnection(sConnStr, "*", "*");          

16、;   stmt = conn.createStatement();             System.out.println(new Date();             int j=0;            

17、 for(int i=0;i<10000;i+)                 j=10001+i;                 /追加           

18、      sql="insert into tablename(*, *, *.) "+"values('test"+i+"',*,*.)"                 /更新           

19、      /sql="update tablename set field_no='testupdate',*,*. where filed_no="+j;                 /删除             

20、    /sql="delete from tablename where tablename="+j;                                  /查询    &#

21、160;            /sql="select * from tablename where tablename="+j;                             

22、     stmt.executeUpdate(sql);                 /rs=stmt.executeQuery(sql);                 /rs.next();   &

23、#160;                      System.out.println(new Date();             /rs.close();         

24、0;   stmt.close();             conn.close();             System.out.println("Update is secuessful!");         catch (SQL

25、Exception ex)              System.err.println("executeUpdate:" + ex.getMessage();                  public void executeSql(String sql)   

26、60;       stmt = null;        rs = null;        try             conn = DriverManager.getConnection(sConnStr, "*", "*"); 

27、           stmt = conn.createStatement();            rs=stmt.executeQuery(sql);            rs.next();      

28、60;     System.out.println("Count is "+rs.getString(1);            stmt.close();            conn.close();         &

29、#160;  /System.out.println("OK");        catch (SQLException ex)             System.err.println("executeSql:" + ex.getMessage();          &#

30、160;     public static void main(String args)         testsybase mytest = new testsybase();        mytest.executeUpdate();            上面的java代码调试通过后，可以通过注释不同的代码段，分别测

31、试增加、修改、删除、查询的等情况的性能，并得出时长，反算出性能。        这里说明一点，java代码即可以单独的打成jar包，放在服务器上运行，也可以直接在本地IDE运行。如果觉得LoadRunner专业，也可以放到LoadRunner里运行，选择Java Vuser协议，这里需要注意的是，LoadRunner运行时，需要设置好Runtime Settings中的Classpath，代码运行需要的jar包都要加到这里。提醒一点的是，笔者使用的是LoadRunner 8.0，在跑上面的代码时，使用的是Java 1.4的虚

32、拟机，高版本如1.5就不能成功运行。        从这个例子可以看出，此种应用灵活性强，任何数据库都可以做测试，只要有提供的驱动即可，如果需要，还可以扩展其他的方法。但测试人员需至少掌握一种高级编程语言，对数据库操作也必须很熟悉，要求较高，所以又引出了下面的Benchmark的应用方法。3) Benchmark应用1. 引言        诚然上述的编写代码以进行数据库性能测试，对于初级测试员来说还显得有点难度，如何才能使用比较简单的

33、方法进行测试呢？这里将会介绍Quest公司的Benchmark Factory，它以向导的方式一步步指引你开展测试，是一个很容易上手的工具。2. 模型设计        假设有一个正在使用的数据库，库中有相当数量的数据，作为支撑某个系统用。每天上班时间中大概有500人次的A表写入记录，也大约有500人次的A表查询；系统的程序每天大概会往数据库的B表写进50000条记录，以及5000条C表记录，还有1000条A表记录，删除500条A表记录，更新100条D表记录；然后管理员要对B表、C表及D表进行50人次查询。根据二八

34、原则，百分之八十的工作在百分之二十的时间内完成，即上述列出的工作量，其80%将在1.6小时完成。        另外作为对比，本次测试再对该模型进行缩减处理，即在二八原则的基础上，工作量及时间都缩减为原来的10%。        最终的结果是10分钟内，对数据库进行的查询操作有40条A表查询、BCD表各4条查询；写操作有120条A表记录、4000条B表记录、400条C表记录；更新操作有8条D表记录；删除操作有40条A表记录。3. 语句构建

35、0;       相关的SQL语句构建如下：1、查询A表select * from A2、查询B表select * from B3、查询C表select * from C4、查询D表select * from D5、写入A表insert into A (a,b,c) values (1,2,3)6、写入B表insert into B(e,f,g) values (4,5,6)7、写入C表insert into C(h,i,j) values (7,8,9)8、更新D表update D set k = $BFRand(100)9、删除A

36、表记录delete from A WHERE ROWNUM<=1注：$BFRand(100)是Benchmark Factory提供的一个随即函数。4. 方案建立在Benchmark Factory里面建立好ORACLE的profile后，新建一个Scenario(Create a custom load scenario)因为有多个SQL语句，所以类型选择混合(Mix)接着选择添加SQL语句 一一填写完成并根据模型设计赋予不同的权重(Weight)大约设置一下并发用户数，完成后可以看到脚本区有着新增的事务列表      

37、60;  在右侧窗口还可以设置每次迭代的时间与并发用户数         然后再到左边脚本区，在右键菜单中选择Submit Job，这时候Benchmark Factory就开始自动跑起来了。 5. 测试结果注：红色加粗字体为值得关注部分1、10分钟10个并发用户Run InformationTest Run Id12StatusCompletedStart Time2008-3-25 12:31Stop Time2008-3-25 12:42Comment10min test2(10users)Timi

38、ng SettingsSampling Time0h:9m:41sPre-Sample Time0h:0m:0sOverall ResultsUserloadTest PhaseTPSBPSRowsBytes1019.7536714.624009721330928Transaction Results - User Load: 10NameExecutionsRowsBytesAvg Timedelete from A WHERE ROWNUM<=158000.011update D set k = $BFRand(100)12000.094select * from D551200.0

39、02select * from C414067929840.065select * from B634396181954840.987select * from A48429023423400.021insert into C(h,i,j) values (7,8,9)473000.024insert into B(e,f,g) values (4,5,6)4918000.021insert into A (a,b,c) values (1,2,3)137000.03 可见TPS约为并发用户数，应该还有上升空间，各SQL语句执行次数比较符合理想目标。用时方面就是B表查询需时较长（同时

40、B表的行数也比较多），其他比较理想。另估计是B表的查询延迟了其他的操作，导致SQL脚本总体执行次数不算太多。2、80100个并发虚拟用户逐渐增加的5次迭代Run InformationTest Run Id13StatusCompletedStart Time2008-3-25 14:02Stop Time2008-3-25 16:43Comment1h40m 80100usersTest InformationName:Custom Mix Load ScenarioTest Type:Mixed Workload Database TestTest Id:9VersionOverall R

41、esultsUserloadTest PhaseTPSBPSRowsBytes80174.6219089544138842221387293785153.7443197939608651512537834690133.93481942613545885721379399595128.854622486158435828435056936100125.054469853182398669712356930Transaction Results - User Load: 80NameExecutionsRowsBytesAvg Timedelete from A WHERE ROWNUM<=1753000.039update D set k = $BFRand(100)145000.015select * from D787818720.003select * from C733438131939105321.438select * from B723063689162069148112.13select * from A7437312623992690520.336insert into C(h,i,j) values (7,8,9)7360000.07insert into B(e,f,g) values (4,5,6)75025000.0