软件工程第七章( 3-2 ) 软件测试

70
软软软软软软软3-2 软软软软 软软软 软软软软软软软软软软软 2006 软 10 软

Upload: nolen

Post on 19-Jan-2016

76 views

Category:

Documents


0 download

DESCRIPTION

软件工程第七章( 3-2 ) 软件测试. 方海光 首都师范大学教育技术系 2006 年 10 月. Contents. 7.4 测试用例设计. 软件危机 (1.2). 测试用例设计. 两种常用的测试方法 黑盒测试 白盒测试. 黑盒测试. 这种方法是把 测试对象 看做 一个黑盒子 ,测试人员完全不考虑程序内部的逻辑结构和内部特性,只依据程序的需求规格说明书,检查程序的功能是否符合它的功能说明。 黑盒测试又叫做 功能测试 或 数据驱动测试 。. 黑盒测试方法是在程序接口上进行测试,主要是为了发现以下错误 : 是否有不正确或遗漏了的功能 ? - PowerPoint PPT Presentation

TRANSCRIPT

Page 1: 软件工程第七章( 3-2 ) 软件测试

软件工程第七章( 3-2 )

软件测试

方海光首都师范大学教育技术系

2006 年 10 月

Page 2: 软件工程第七章( 3-2 ) 软件测试

2

www.fang.csai.cn

Contents

7.4 测试用例设计

软件危机 (1.2)

Page 3: 软件工程第七章( 3-2 ) 软件测试

3

www.fang.csai.cn

测试用例设计测试用例设计

两种常用的测试方法两种常用的测试方法 黑盒测试黑盒测试 白盒测试白盒测试

Page 4: 软件工程第七章( 3-2 ) 软件测试

4

www.fang.csai.cn

黑盒测试黑盒测试

这种方法是把这种方法是把测试对象测试对象看做看做一个黑盒一个黑盒子子,测试人员完全不考虑程序内部的,测试人员完全不考虑程序内部的逻辑结构和内部特性,只依据程序的逻辑结构和内部特性,只依据程序的需求规格说明书,检查程序的功能是需求规格说明书,检查程序的功能是否符合它的功能说明。否符合它的功能说明。

黑盒测试又叫做黑盒测试又叫做功能测试功能测试或或数据驱动数据驱动测试测试。。

Page 5: 软件工程第七章( 3-2 ) 软件测试

5

www.fang.csai.cn

黑盒测试方法是在程序接口上进行测试,黑盒测试方法是在程序接口上进行测试,主要是为了发现以下错误主要是为了发现以下错误 ::

是否有不正确或遗漏了的功能是否有不正确或遗漏了的功能 ?? 在接口上,在接口上,输入能否正确地接输入能否正确地接受受 ? ? 能否输出正确的结果能否输出正确的结果 ??

是否有数据结构错误或外部信是否有数据结构错误或外部信息息 (( 例如数据文件例如数据文件 )) 访问错误访问错误 ??

性能上是否能够满足要求性能上是否能够满足要求 ?? 是否有初始化或终止性错误是否有初始化或终止性错误 ??  

Page 6: 软件工程第七章( 3-2 ) 软件测试

6

www.fang.csai.cn

用黑盒测试发现程序中的错误,必须在用黑盒测试发现程序中的错误,必须在所有可能的输入条件和输出条件所有可能的输入条件和输出条件中确定中确定测试数据,来检查程序是否都能产生正测试数据,来检查程序是否都能产生正确的输出。确的输出。

但这是但这是不可能不可能的。的。

Page 7: 软件工程第七章( 3-2 ) 软件测试

7

www.fang.csai.cn

假设一个程序假设一个程序 PP 有输入量有输入量 XX 和和 YY 及输及输出量出量 ZZ 。在字长为。在字长为 3232 位的计算机上运位的计算机上运行。若行。若 XX 、、 YY 取整数,按黑盒方法进行取整数,按黑盒方法进行穷举测试:穷举测试:

可能采用的可能采用的 测试数据组:测试数据组: 223232××223232

== 226464

如果测试一组数据需要如果测试一组数据需要 11 毫秒,一年工毫秒,一年工作作 365365×× 24 24 小时,完成所有测试需小时,完成所有测试需 55 亿亿年。年。

Page 8: 软件工程第七章( 3-2 ) 软件测试

8

www.fang.csai.cn白盒测试白盒测试

此方法此方法把测试对象看做一个透明的盒把测试对象看做一个透明的盒子子,它允许测试人员利用程序内部的逻,它允许测试人员利用程序内部的逻辑结构及有关信息,设计或选择测试用辑结构及有关信息,设计或选择测试用例,对程序所有逻辑路径进行测试。例,对程序所有逻辑路径进行测试。

通过在不同点检查程序的状态,确定通过在不同点检查程序的状态,确定实际的状态是否与预期的状态一致。因实际的状态是否与预期的状态一致。因此白盒测试又称为结构测试或逻辑驱动此白盒测试又称为结构测试或逻辑驱动测试。测试。

Page 9: 软件工程第七章( 3-2 ) 软件测试

9

www.fang.csai.cn

软件人员使用白盒测试方法,主要想对程软件人员使用白盒测试方法,主要想对程序模块进行如下的检查:序模块进行如下的检查: 对程序模块的对程序模块的所有独立的执行路径所有独立的执行路径至少测试一次;至少测试一次;

对对所有的逻辑判定所有的逻辑判定,,取“取“真真”与取”与取““假假”的两种情况都至少测试一次”的两种情况都至少测试一次;;

在循环的边界和运行界限内执行循在循环的边界和运行界限内执行循环体;环体;

测试测试内部数据结构的有效性内部数据结构的有效性,等。,等。

Page 10: 软件工程第七章( 3-2 ) 软件测试

10

www.fang.csai.cn

对一个具有对一个具有多重选择和循环嵌套多重选择和循环嵌套的程的程序,序,不同的路径数目可能是天文数字不同的路径数目可能是天文数字。。给出一个小程序的流程图,它包括了一给出一个小程序的流程图,它包括了一个执行个执行 2020 次的循环。次的循环。

包含的不同执行路径数达包含的不同执行路径数达 552020 条,对每条,对每一条路径进行测试需要一条路径进行测试需要 11 毫秒,假定一毫秒,假定一年工作年工作 365 365 ×× 24 24 小时,要想把所有路径小时,要想把所有路径测试完,需测试完,需 31703170 年。年。

Page 11: 软件工程第七章( 3-2 ) 软件测试

11

www.fang.csai.cn

Page 12: 软件工程第七章( 3-2 ) 软件测试

12

www.fang.csai.cn

逻辑覆盖逻辑覆盖

1 1 语句覆盖 2 2 判定覆盖 3 3 条件覆盖

4 4 判定/条件覆盖 5 5 条件组合覆盖 6 6 路径覆盖

逻辑覆盖是以逻辑覆盖是以程序内部的逻辑结构程序内部的逻辑结构为为基础的设计测试用例的技术。它属白基础的设计测试用例的技术。它属白盒测试。盒测试。

Page 13: 软件工程第七章( 3-2 ) 软件测试

13

www.fang.csai.cn

(A>1) and (B=0)

(A=2) or (X>1)(A=2) or (X>1)

X=X/AX=X/A

X=X+1X=X+1

TT

TT

FF

FF

aa

bb

dd

cc

ee

Page 14: 软件工程第七章( 3-2 ) 软件测试

14

www.fang.csai.cn

L1L1 ( ( a a c c e e ) )= = {{(A>1) (A>1) and and (B=0)(B=0)} and } and {{(A=2) (A=2) or or (X/A>1)(X/A>1)}}= (A>1) = (A>1) andand (B=0) (B=0) andand (A=2) (A=2) oror (A>1) (A>1) andand (B=0) (B=0) andand (X/A>1) (X/A>1)= = (A=2) (A=2) andand (B=0) (B=0) oror (A>1) (A>1) andand (B=0) (B=0) andand (X/A>1) (X/A>1)

Page 15: 软件工程第七章( 3-2 ) 软件测试

15

www.fang.csai.cn

L2 ( aL2 ( a b b d ) d )= = not{not{(A>1) (A>1) andand (B=0) (B=0)}} and and not{not{(A=2) (A=2) oror (X>1) (X>1)}}= = { not{ not (A>1) (A>1) or notor not (B=0) (B=0) } and} and { not{ not (A=2) (A=2) and notand not (X>1) (X>1) }}== notnot (A>1) (A>1) and notand not (A=2) (A=2) and notand not (X>1) (X>1) or or notnot (B=0) (B=0) andand notnot (A=2) (A=2) and notand not (X>1) (X>1)

Page 16: 软件工程第七章( 3-2 ) 软件测试

16

www.fang.csai.cn

L3 ( aL3 ( a b b e) e)= = not {not {(A>1) (A>1) andand (B=0) (B=0)} and} and {{(A=2) (A=2) oror (X>1) (X>1)}}= = { not{ not (A>1) (A>1) or notor not (B=0) (B=0)} and} and {{(A=2) (A=2) oror (X>1) (X>1)}}= = notnot (A>1) (A>1) andand (A=2) (A=2) or or notnot (A>1) (A>1) andand (X>1)(X>1) oror notnot (B=0) (B=0) and and (A=2) (A=2) oror notnot (B=0) (B=0) andand (X>1) (X>1)

Page 17: 软件工程第七章( 3-2 ) 软件测试

17

www.fang.csai.cn

L4 ( aL4 ( a c c d ) d )= = {{(A>1) (A>1) andand (B=0) (B=0)}} andand notnot {{(A=2) (A=2) oror (X/A>1) (X/A>1)}}= = (A>1) (A>1) and and (B=0) (B=0) and notand not (A=2) (A=2) andand notnot (X/A>1) (X/A>1)

Page 18: 软件工程第七章( 3-2 ) 软件测试

18

www.fang.csai.cn

1 1 语句覆盖语句覆盖  

语句覆盖就是设计若干个测试用例,运语句覆盖就是设计若干个测试用例,运行被测程序,使得行被测程序,使得每一可执行语句至少每一可执行语句至少执行一次执行一次。。

在图例中,正好所有的可执行语句都在在图例中,正好所有的可执行语句都在路径路径 L1L1 上,所以选择上,所以选择路径 路径 L1L1 设计测设计测试用例,就可以覆盖所有的可执行语句。试用例,就可以覆盖所有的可执行语句。

Page 19: 软件工程第七章( 3-2 ) 软件测试

19

www.fang.csai.cn

测试用例的设计格式如下测试用例的设计格式如下【【输入的输入的 ((AA, , BB, , XX)) ,输出的,输出的 ((AA, , BB, , XX)) 】】

为图例设计满足为图例设计满足语句覆盖语句覆盖的测试用例是的测试用例是 ::【【 (2, 0, 4)(2, 0, 4) ,, (2, 0, 3)(2, 0, 3) 】】  

覆盖 覆盖 aceace 【【 L1L1 】】

(A=2) (A=2) andand (B=0) (B=0) oror (A>1) (A>1) andand (B=0) (B=0) andand (X/A>1) (X/A>1)

Page 20: 软件工程第七章( 3-2 ) 软件测试

20

www.fang.csai.cn

2 2 判定覆盖判定覆盖

判定覆盖就是设计若干个测试用例,判定覆盖就是设计若干个测试用例,运行被测程序,使得运行被测程序,使得程序中每个判断程序中每个判断的取真分支和取假分支至少经历一次的取真分支和取假分支至少经历一次。。

判定覆盖又称为判定覆盖又称为分支覆盖分支覆盖。。对于图例,如果选择对于图例,如果选择路径路径 L1L1 和和 L2L2 ,,就可得满足要求的测试用例就可得满足要求的测试用例 ::

Page 21: 软件工程第七章( 3-2 ) 软件测试

21

www.fang.csai.cn

【【 (2, 0, 4)(2, 0, 4) ,, (2, 0, 3)(2, 0, 3) 】】覆盖 覆盖 aceace 【【 L1L1 】】【【 (1, 1, 1)(1, 1, 1) ,, (1, 1, 1)(1, 1, 1) 】】覆盖 覆盖 abdabd 【【 L2L2 】】

(A=2) (A=2) andand (B=0) (B=0) oror (A>1) (A>1) andand (B=0) (B=0) andand

(X/A>1)(X/A>1)

notnot (A>1) (A>1) and notand not (A=2) (A=2) and notand not (X>1) (X>1) or or notnot (B=0) (B=0) andand notnot (A=2) (A=2) and notand not (X>1) (X>1)

Page 22: 软件工程第七章( 3-2 ) 软件测试

22

www.fang.csai.cn

如果选择路径如果选择路径 L3L3 和和 L4L4 ,还可得另一组可,还可得另一组可用的测试用例用的测试用例 ::【【 (2, 1, 1)(2, 1, 1) ,, (2, 1, 2)(2, 1, 2) 】】覆盖 覆盖 abeabe 【【 L3L3 】】【【 (3, 0, 3)(3, 0, 3) ,, (3, 1, 1)(3, 1, 1) 】】覆盖 覆盖 acdacd 【【 L4L4 】】

not not (A>1) (A>1) andand (X>1) (X>1) or or notnot (B=0) (B=0) andand (A=2)(A=2) or or notnot (B=0) (B=0) andand (X>1) (X>1)

(A>1) (A>1) and and (B=0) (B=0) and notand not (A=2) (A=2) andand notnot (X/A>1) (X/A>1)

Page 23: 软件工程第七章( 3-2 ) 软件测试

23

www.fang.csai.cn3 3 条件覆盖条件覆盖

条件覆盖就是设计若干个测试用例,运行被条件覆盖就是设计若干个测试用例,运行被测程序,使得程序中测程序,使得程序中每个判断的每个条件的每个判断的每个条件的可能取值至少执行一次可能取值至少执行一次。。

在图例中,我们事先可对所有条件的取值加在图例中,我们事先可对所有条件的取值加以标记。例如,以标记。例如,

对于第一个判断:对于第一个判断: 条件 条件 AA >> 1 1 取真为 ,取假为取真为 ,取假为 条件 条件 BB == 0 0 取真为 ,取假为取真为 ,取假为

T1 T1

T2 T2

Page 24: 软件工程第七章( 3-2 ) 软件测试

24

www.fang.csai.cn

对于第二个判断:对于第二个判断: 条件条件 AA == 2 2 取真为 ,取假为取真为 ,取假为 条件 条件 XX >> 1 1 取真为 ,取假为取真为 ,取假为

测试用例测试用例 覆盖分支覆盖分支 条件取值条件取值

【【 (2, 0, 4)(2, 0, 4) ,, (2, 0, 3)(2, 0, 3) 】 】 L1(c, e)L1(c, e)

【【 (1, 0, 1)(1, 0, 1) ,, (1, 0, 1)(1, 0, 1) 】 】 L2(b, d) L2(b, d)

【【 (2, 1, 1)(2, 1, 1) ,, (2, 1, 2)(2, 1, 2) 】 】 L3(b, e)L3(b, e)

或或

T3 T3T4

T4

T T T T1 2 3 4

4321 TTTTT T T T1 2 3 4

Page 25: 软件工程第七章( 3-2 ) 软件测试

25

www.fang.csai.cn

测 试 用 例测 试 用 例 覆盖分支覆盖分支 条件取值条件取值【【 (1, 0, 3)(1, 0, 3) ,, (1, 0, 4)(1, 0, 4) 】 】 L3(b, e) L3(b, e)

【【 (2, 1, 1)(2, 1, 1) ,, (2, 1, 2)(2, 1, 2) 】 】 L3(b, e)L3(b, e) T T T T1 2 3 4

T T T T1 2 3 4

Page 26: 软件工程第七章( 3-2 ) 软件测试

26

www.fang.csai.cn4 4 判定判定 // 条件覆盖条件覆盖

判定-条件覆盖就是设计足够的测试用例,判定-条件覆盖就是设计足够的测试用例,使得使得判断中每个条件的所有可能取值至少判断中每个条件的所有可能取值至少执行一次,每个判断中的每个条件的可能执行一次,每个判断中的每个条件的可能取值至少执行一次取值至少执行一次。。

Page 27: 软件工程第七章( 3-2 ) 软件测试

27

www.fang.csai.cn

测 试 用 例测 试 用 例 覆盖分支覆盖分支 条件取值条件取值【【 (2, 0, 4)(2, 0, 4) ,, (2, 0, 3)(2, 0, 3) 】】 L1(c, e)L1(c, e)

【【 (1, 1, 1)(1, 1, 1) ,, (1, 1, 1)(1, 1, 1) 】】 L2(b, d) L2(b, d)

T T T T1 2 3 4

T T T T1 2 3 4

(A=2) (A=2) andand (B=0) (B=0) oror (A>1) (A>1) andand (B=0) (B=0) andand

(X/A>1)(X/A>1) notnot (A>1) (A>1) and notand not (A=2) (A=2) and notand not (X>1) (X>1) or or notnot (B=0) (B=0) andand notnot (A=2) (A=2) and notand not (X>1) (X>1)

Page 28: 软件工程第七章( 3-2 ) 软件测试

28

www.fang.csai.cn

andand

oror

A>1 TT B=0 TT

X=X/A

TT

FFFF

A=2 TT

FF

X>1FF

X=X+1

Page 29: 软件工程第七章( 3-2 ) 软件测试

29

www.fang.csai.cn5 5 条件组合覆盖条件组合覆盖

条件组合覆盖就是设计足够的测试用例,条件组合覆盖就是设计足够的测试用例,运行被测程序,使得运行被测程序,使得每个判断的所有可每个判断的所有可能的条件取值组合至少执行一次能的条件取值组合至少执行一次。。

记 ① 记 ① AA >> 1, B1, B == 0 0 作 作 ② ② AA >> 1, B≠0 1, B≠0 作 作

③ ③ A>$1, BA>$1, B == 0 0 作 作 ④ ④ A>$1, B≠0 A>$1, B≠0 作作

T T1 2

T T1 2

T T1 2

T T1 2

Page 30: 软件工程第七章( 3-2 ) 软件测试

30

www.fang.csai.cn

⑤ ⑤ AA == 2, X2, X >> 1 1 作 作 ⑥ ⑥ AA == 2, X>$1 2, X>$1 作 作 ⑦ ⑦ A≠2, XA≠2, X >> 1 1 作 作 ⑧ ⑧ A≠2, X>$1 A≠2, X>$1 作作

测 试 用 例测 试 用 例 覆盖条件覆盖条件 覆盖组合覆盖组合

【【 (2, 0, 4), (2, 0, 3)(2, 0, 4), (2, 0, 3) 】】 (L1)(L1) , ① ⑤ , ① ⑤

【【 (2, 1, 1), (2, 1, 2)(2, 1, 1), (2, 1, 2) 】】 (L3)(L3) , ② ⑥ , ② ⑥

【【 (1, 0, 3), (1, 0, 4)(1, 0, 3), (1, 0, 4) 】】 (L3)(L3) , ③ ⑦ , ③ ⑦

【【 (1, 1, 1), (1, 1, 1)(1, 1, 1), (1, 1, 1) 】】 (L2)(L2) , ④ ⑧ , ④ ⑧

T T3 4

T T3 4

T T3 4

T T3 4

T T T T1 2 3 4

T T T T1 2 3 4

T T T T1 2 3 4

T T T T1 2 3 4

Page 31: 软件工程第七章( 3-2 ) 软件测试

31

www.fang.csai.cn

6 6 路径测试路径测试

路径测试就是设计足够的测试用例,路径测试就是设计足够的测试用例,覆盖程覆盖程序中所有可能的路径序中所有可能的路径。。

测 试 用 例测 试 用 例 通过路径通过路径 覆盖条件覆盖条件【【 (2, 0, 4), (2, 0, 3)(2, 0, 4), (2, 0, 3) 】 】 ace (L1)ace (L1)

【【 (1, 1, 1), (1, 1, 1)(1, 1, 1), (1, 1, 1) 】 】 abdabd (L2)(L2)

【【 (1, 1, 2), (1, 1, 3)(1, 1, 2), (1, 1, 3) 】 】 abeabe (L3)(L3)

【【 (3, 0, 3), (3, 0, 1)(3, 0, 3), (3, 0, 1) 】 】 acdacd (L4)(L4)

T T T T1 2 3 4

T T T T1 2 3 4

T T T T1 2 3 4

T T T T3 41 2

Page 32: 软件工程第七章( 3-2 ) 软件测试

32

www.fang.csai.cn黑盒测试的测试用例设计黑盒测试的测试用例设计

等价类划分 边界值分析 错误推测法

Page 33: 软件工程第七章( 3-2 ) 软件测试

33

www.fang.csai.cn

1 1 等价类划分等价类划分

等价类划分是一种典型的黑盒测试方法,等价类划分是一种典型的黑盒测试方法,使用这一方法时,使用这一方法时,完全不考虑程序的内完全不考虑程序的内部结构,只依据程序的规格说明来设计部结构,只依据程序的规格说明来设计测试用例测试用例。。

等价类划分方法把所有可能的输入数据,等价类划分方法把所有可能的输入数据,即程序的输入域划分成若干部分,然后即程序的输入域划分成若干部分,然后从每一部分中选取少数有代表性的数据从每一部分中选取少数有代表性的数据做为测试用例。做为测试用例。

Page 34: 软件工程第七章( 3-2 ) 软件测试

34

www.fang.csai.cn

使用这一方法设计测试用例要经历使用这一方法设计测试用例要经历划划分等价类分等价类(列出等价类表)和(列出等价类表)和选取测试选取测试用例用例两步。两步。

划分等价类划分等价类等价类是指某个输入域的子集合。在该等价类是指某个输入域的子集合。在该子集合中,子集合中,各个输入数据对于揭露程序各个输入数据对于揭露程序中的错误都是等效的中的错误都是等效的。测试某等价类的。测试某等价类的代表值就等价于对这一类其它值的测试。代表值就等价于对这一类其它值的测试。

Page 35: 软件工程第七章( 3-2 ) 软件测试

35

www.fang.csai.cn

等价类的划分有两种不同的情况:等价类的划分有两种不同的情况:① 有效等价类① 有效等价类:是指对于程序的规格:是指对于程序的规格说明来说,是合理的,有意义的输入说明来说,是合理的,有意义的输入数据构成的集合。数据构成的集合。

② ② 无效等价类无效等价类:是指对于程序的规:是指对于程序的规格说明来说,是不合理的,无意义的格说明来说,是不合理的,无意义的输入数据构成的集合。输入数据构成的集合。

在设计测试用例时,要同时考虑有效在设计测试用例时,要同时考虑有效等价类和无效等价类的设计。等价类和无效等价类的设计。

Page 36: 软件工程第七章( 3-2 ) 软件测试

36

www.fang.csai.cn

划分等价类等价类的原则。划分等价类等价类的原则。(1) (1) 如果输入条件规定了取值范围,或如果输入条件规定了取值范围,或值的个数,则可以确立一个有效等价类值的个数,则可以确立一个有效等价类和两个无效等价类。和两个无效等价类。

Page 37: 软件工程第七章( 3-2 ) 软件测试

37

www.fang.csai.cn

例如,在程序的规格说明中,对输入条件有例如,在程序的规格说明中,对输入条件有一句话:一句话: ““ …… …… 项数可以从项数可以从 11 到到 999 ……”999 ……”

则有效等价类是“则有效等价类是“ 1≤1≤项数≤项数≤ 999999””

两个无效等价类是“两个无效等价类是“项数<项数< 11”” 或“或“项项数>数> 999999”” 。在数轴上表示成。在数轴上表示成 ::

Page 38: 软件工程第七章( 3-2 ) 软件测试

38

www.fang.csai.cn

(2) (2) 如果输入条件规定了输入值的集合,如果输入条件规定了输入值的集合,或者是规定了“或者是规定了“必须如何必须如何”的条件,这”的条件,这时可确立一个有效等价类和一个无效等时可确立一个有效等价类和一个无效等价类。价类。

例如,在例如,在 PascalPascal 语言中对变量标识符语言中对变量标识符规定为“规定为“以字母打头的以字母打头的…………串串”。那么”。那么所有以字母打头的构成有效等价类,而所有以字母打头的构成有效等价类,而不在此集合内(不以字母打头)的归于不在此集合内(不以字母打头)的归于无效等价类。无效等价类。

Page 39: 软件工程第七章( 3-2 ) 软件测试

39

www.fang.csai.cn

(3) (3) 如果输入条件是一个布尔量,则可如果输入条件是一个布尔量,则可以确定一个有效等价类和一个无效等价以确定一个有效等价类和一个无效等价类。类。(4) (4) 如果规定了输入数据的一组值,而如果规定了输入数据的一组值,而且程序要对每个输入值分别进行处理。且程序要对每个输入值分别进行处理。这时可为 每一个输入值确立一个有效这时可为 每一个输入值确立一个有效等价类,此外针对这组值确立一个无效等价类,此外针对这组值确立一个无效等价类,它是所有不允许的输入值的集等价类,它是所有不允许的输入值的集合。合。

Page 40: 软件工程第七章( 3-2 ) 软件测试

40

www.fang.csai.cn

例如,在教师上岗方案中规定对教授、例如,在教师上岗方案中规定对教授、副教授、讲师和助教分别计算分数,做副教授、讲师和助教分别计算分数,做相应的处理。因此可以确定相应的处理。因此可以确定 44 个有效等个有效等价类为教授、副教授、讲师和助教,一价类为教授、副教授、讲师和助教,一个无效等价类,它是所有不符合以上身个无效等价类,它是所有不符合以上身分的人员的输入值的集合。分的人员的输入值的集合。(5) (5) 如果规定了输入数据必须遵守的规如果规定了输入数据必须遵守的规则,则可以确立一个有效等价类(符合则,则可以确立一个有效等价类(符合规则)和若干个无效等价类(从不同角规则)和若干个无效等价类(从不同角度违反规则)。度违反规则)。

Page 41: 软件工程第七章( 3-2 ) 软件测试

41

www.fang.csai.cn

例如,例如, PascalPascal 语言规定 “一个语句必须语言规定 “一个语句必须以分号‘以分号‘ ;’;’ 结束”。这时,可以确定一个结束”。这时,可以确定一个有效等价类 “以‘有效等价类 “以‘ ;’;’ 结束”,若干个无结束”,若干个无效等价类 “以‘效等价类 “以‘ :’:’ 结束”、“以‘结束”、“以‘ ,’,’ 结结束”、“以‘ ’结束”、“以束”、“以‘ ’结束”、“以 LFLF 结结束”等。束”等。

确立测试用例确立测试用例在确立了等价类之后,建立等价类表,列在确立了等价类之后,建立等价类表,列出所有划分出的等价类。出所有划分出的等价类。

Page 42: 软件工程第七章( 3-2 ) 软件测试

42

www.fang.csai.cn

再从划分出的等价类中按以下原则选择再从划分出的等价类中按以下原则选择测试用例:测试用例:((1)1) 为每一个等价类规定一个唯一编号;为每一个等价类规定一个唯一编号;(2)(2) 设计一个新的测试用例,使其设计一个新的测试用例,使其尽可能多地尽可能多地覆盖尚未被覆盖的有效等价类覆盖尚未被覆盖的有效等价类,重复这一步,,重复这一步,直到所有的有效等价类都被覆盖为止;直到所有的有效等价类都被覆盖为止;(3)(3) 设计一个新的测试用例,使其设计一个新的测试用例,使其仅覆盖一个仅覆盖一个尚未被覆盖的无效等价类尚未被覆盖的无效等价类,重复这一步,直到,重复这一步,直到所有的无效等价类都被覆盖为止所有的无效等价类都被覆盖为止。。

Page 43: 软件工程第七章( 3-2 ) 软件测试

43

www.fang.csai.cn

用等价类划分法设计测试用例的实例用等价类划分法设计测试用例的实例在某一在某一 PASCALPASCAL 语言版本中规定:语言版本中规定:““标识符是由字母开头,后跟字母或数标识符是由字母开头,后跟字母或数字的任意组合构成。有效字符数为字的任意组合构成。有效字符数为 88 个,个,最大字符数为最大字符数为 8080 个个。”。”并且规定:“并且规定:“标识符必须先说明,再使标识符必须先说明,再使用。” “在同一说明语句中,标识符用。” “在同一说明语句中,标识符至少必须有一个至少必须有一个。”。”

Page 44: 软件工程第七章( 3-2 ) 软件测试

44

www.fang.csai.cn

用等价类划分方法,建立输入等价类表用等价类划分方法,建立输入等价类表 ::

Page 45: 软件工程第七章( 3-2 ) 软件测试

45

www.fang.csai.cn

下面选取了下面选取了 99 个测试用例,它们覆盖了个测试用例,它们覆盖了所有的等价类。所有的等价类。① ① VAR VAR xx ,, T1234567T1234567 :: REALREAL ;;

BEGIN BEGIN xx := 3.414 := 3.414 ;; T1234567 := 2.732T1234567 := 2.732 ;; ...…...… (1), (2), (4), (8), (9), (12), (14)(1), (2), (4), (8), (9), (12), (14)

② ② VAR VAR :: REALREAL ;; (3)(3)

③ ③ VAR VAR xx ,:,: REAL;REAL; (5) (5)

Page 46: 软件工程第七章( 3-2 ) 软件测试

46

www.fang.csai.cn

④ ④ VAR T12345678VAR T12345678 :: REALREAL ;; (6)(6) ⑤ ⑤ VAR T12345......VAR T12345...... :: REALREAL ;; (7)(7) 多于多于 8080 个字符个字符 ⑥ ⑥ VAR T$VAR T$ :: CHARCHAR ;; (10)(10) ⑦ ⑦ VAR GOTOVAR GOTO :: INTEGERINTEGER ;; (11)(11) ⑧ ⑧ VAR 2TVAR 2T :: REALREAL ;; (13)(13) ⑨ ⑨ VAR PARVAR PAR :: REALREAL ;; (15)(15) BEGIN ......BEGIN ...... PAP := SIN (3.14 * 0.8) / 6 PAP := SIN (3.14 * 0.8) / 6 ;;

Page 47: 软件工程第七章( 3-2 ) 软件测试

47

www.fang.csai.cn

2 2 边界值分析边界值分析

边界值分析也是一种黑盒测试方法,边界值分析也是一种黑盒测试方法,是对等价类划分方法的补充。是对等价类划分方法的补充。

人们从长期的测试工作经验得知,人们从长期的测试工作经验得知,大大量的错误是发生在输入或输出范围的量的错误是发生在输入或输出范围的边界上,而不是在输入范围的内部边界上,而不是在输入范围的内部。。因此针对各种边界情况设计测试用例,因此针对各种边界情况设计测试用例,可以查出更多的错误可以查出更多的错误。。

Page 48: 软件工程第七章( 3-2 ) 软件测试

48

www.fang.csai.cn

比如,在做三角形计算时,要输入三角比如,在做三角形计算时,要输入三角形的三个边长:形的三个边长: AA 、、 BB 和和 CC 。 我们应。 我们应注意到这三个数值应当满足注意到这三个数值应当满足

AA >> 00 、、 BB >> 00 、、 CC >> 00 、、 AA ++ BB >> CC 、、 AA ++ CC >> BB 、、 BB ++ CC >>

AA ,,才能构成三角形。但如果把六个不才能构成三角形。但如果把六个不等式中的任何一个大于号“>”错写成等式中的任何一个大于号“>”错写成大于等于号“≥”,那就不能构成三角大于等于号“≥”,那就不能构成三角形。问题恰出现在容易被疏忽的边界附形。问题恰出现在容易被疏忽的边界附近。近。

Page 49: 软件工程第七章( 3-2 ) 软件测试

49

www.fang.csai.cn

这里所说的边界是指,相当于输入等价这里所说的边界是指,相当于输入等价类和输出等价类而言,稍高于其边界值类和输出等价类而言,稍高于其边界值及稍低于其边界值的一些特定情况。及稍低于其边界值的一些特定情况。

使用边界值分析方法设计测试用例,首使用边界值分析方法设计测试用例,首先应确定边界情况。先应确定边界情况。应当选取正好等于,应当选取正好等于,刚刚大于,或刚刚小于边界的值做为测刚刚大于,或刚刚小于边界的值做为测试数据试数据,而不是选取等价类中的典型值,而不是选取等价类中的典型值或任意值做为测试数据。 或任意值做为测试数据。

Page 50: 软件工程第七章( 3-2 ) 软件测试

50

www.fang.csai.cn

3 3 错误推测法错误推测法

人们也可以靠经验和直觉推测程序中可人们也可以靠经验和直觉推测程序中可能存在的各种错误,从而有针对性地编能存在的各种错误,从而有针对性地编写检查这些错误的例子。这就是错误推写检查这些错误的例子。这就是错误推测法。测法。

错误推测法的基本想法是:错误推测法的基本想法是:列举出程序列举出程序中所有可能有的错误和容易发生错误的中所有可能有的错误和容易发生错误的特殊情况,根据它们选择测试用例特殊情况,根据它们选择测试用例。。

Page 51: 软件工程第七章( 3-2 ) 软件测试

51

www.fang.csai.cn

补充:测试种类补充:测试种类

软件测试是由一系列不同的测试组成。软件测试是由一系列不同的测试组成。主要目的是对以计算机为基础的系统进主要目的是对以计算机为基础的系统进行充分的测试。行充分的测试。

功能测试功能测试功能测试是在规定的一段时间内运行软功能测试是在规定的一段时间内运行软件系统的所有功能,以验证这个软件系件系统的所有功能,以验证这个软件系统有无严重错误。统有无严重错误。

Page 52: 软件工程第七章( 3-2 ) 软件测试

52

www.fang.csai.cn

可靠性测试可靠性测试如果系统需求说明书中有对可靠性的要如果系统需求说明书中有对可靠性的要求,则需进行可靠性测试。求,则需进行可靠性测试。① ① 平均失效间隔时间平均失效间隔时间 MTBF (Mean MTBF (Mean Time Between Failures) Time Between Failures) 是否超过规定是否超过规定时限时限 ??

② ② 因故障而停机的时间因故障而停机的时间 MTTR MTTR (Mean Time To Repairs) (Mean Time To Repairs) 在一年中应不在一年中应不超过多少时间。超过多少时间。

Page 53: 软件工程第七章( 3-2 ) 软件测试

53

www.fang.csai.cn

强度测试强度测试强度测试是要检查强度测试是要检查在系统运行环境不正在系统运行环境不正常乃至发生故障的情况下,系统可以运常乃至发生故障的情况下,系统可以运行到何种程度的测试行到何种程度的测试。例如:。例如: 把输入数据速率提高一个数量级,把输入数据速率提高一个数量级,确定输入功能将如何响应。确定输入功能将如何响应。

设计需要占用最大存储量或其它资设计需要占用最大存储量或其它资源的测试用例进行测试。源的测试用例进行测试。

Page 54: 软件工程第七章( 3-2 ) 软件测试

54

www.fang.csai.cn

设计出在虚拟存储管理机制中引起设计出在虚拟存储管理机制中引起“颠簸”的测试用例进行测试。“颠簸”的测试用例进行测试。

设计出会对磁盘常驻内存的数据过设计出会对磁盘常驻内存的数据过度访问的测试用例进行测试。度访问的测试用例进行测试。

强度测试的一个变种就是强度测试的一个变种就是敏感性测试敏感性测试。。在程序有效数据界限内一个小范围内的在程序有效数据界限内一个小范围内的一组数据可能引起极端的或不平稳的错一组数据可能引起极端的或不平稳的错误处理出现,或者导致极度的性能下降误处理出现,或者导致极度的性能下降的情况发生。此测试用以发现可能引起的情况发生。此测试用以发现可能引起这种不稳定性或不正常处理的某些数据这种不稳定性或不正常处理的某些数据组合。组合。

Page 55: 软件工程第七章( 3-2 ) 软件测试

55

www.fang.csai.cn

性能测试性能测试性能测试是要检查系统是否满足在需求性能测试是要检查系统是否满足在需求说明书中规定的性能。特别是对于实时说明书中规定的性能。特别是对于实时系统或嵌入式系统。系统或嵌入式系统。

性能测试常常需要与强度测试结合起来性能测试常常需要与强度测试结合起来进行,并常常要求同时进行硬件和软件进行,并常常要求同时进行硬件和软件检测。检测。

通常,对软件性能的检测表现在以下几通常,对软件性能的检测表现在以下几个方面:个方面:响应时间、吞吐量、辅助存储响应时间、吞吐量、辅助存储区区,例如缓冲区,工作区的大小等、,例如缓冲区,工作区的大小等、处处理精度理精度,等等。,等等。

Page 56: 软件工程第七章( 3-2 ) 软件测试

56

www.fang.csai.cn

恢复测试恢复测试恢复测试是要证实在克服恢复测试是要证实在克服硬件故障硬件故障 (( 包包括掉电、硬件或网络出错等括掉电、硬件或网络出错等 )) 后,系统后,系统能否正常地继续进行工作,并不对系统能否正常地继续进行工作,并不对系统造成任何损害。造成任何损害。

为此,可采用各种人工干预的手段,模为此,可采用各种人工干预的手段,模拟硬件故障,故意造成软件出错。并由拟硬件故障,故意造成软件出错。并由此检查:此检查: 错误探测功能──系统能否发现硬错误探测功能──系统能否发现硬件失效与故障;件失效与故障;

Page 57: 软件工程第七章( 3-2 ) 软件测试

57

www.fang.csai.cn

能否切换或启动备用的硬件;能否切换或启动备用的硬件; 在故障发生时能否保护正在运行的作在故障发生时能否保护正在运行的作业和系统状态;业和系统状态;

在系统恢复后能否从最后记录下来的在系统恢复后能否从最后记录下来的无错误状态开始继续执行作业,等等。无错误状态开始继续执行作业,等等。

掉电测试:其目的是测试软件系统在掉电测试:其目的是测试软件系统在发生电源中断时能否保护当时的状态发生电源中断时能否保护当时的状态且不毁坏数据,然后在电源恢复时从且不毁坏数据,然后在电源恢复时从保留的断点处保留的断点处重新进行操作重新进行操作。。

Page 58: 软件工程第七章( 3-2 ) 软件测试

58

www.fang.csai.cn

启动/停止测试启动/停止测试这类测试的目的是验证在机器启动及关这类测试的目的是验证在机器启动及关机阶段,软件系统正确处理的能力。机阶段,软件系统正确处理的能力。这类测试包括这类测试包括 反复启动软件系统反复启动软件系统 (( 例如,操作系例如,操作系统自举、网络的启动、应用程序的调统自举、网络的启动、应用程序的调用等用等 ))

在尽可能多的情况下在尽可能多的情况下关机关机。。

Page 59: 软件工程第七章( 3-2 ) 软件测试

59

www.fang.csai.cn

配置测试配置测试这类测试是要检查这类测试是要检查计算机系统内各个设计算机系统内各个设备或各种资源之间的相互联结和功能分备或各种资源之间的相互联结和功能分配中的错误配中的错误。。

它主要包括以下几种:它主要包括以下几种: 配置命令测试:配置命令测试:验证全部配置命令验证全部配置命令的可操作性(有效性);特别对最大的可操作性(有效性);特别对最大配置和最小配置要进行测试。软件配配置和最小配置要进行测试。软件配置和硬件配置都要测试。置和硬件配置都要测试。

Page 60: 软件工程第七章( 3-2 ) 软件测试

60

www.fang.csai.cn

循环配置测试循环配置测试:证明对每个设备物:证明对每个设备物理与逻辑的,逻辑与功能的每次循环理与逻辑的,逻辑与功能的每次循环置换配置都能正常工作。置换配置都能正常工作。

修复测试修复测试:检查每种配置状态及哪:检查每种配置状态及哪个设备是坏的。并用自动的或手工的个设备是坏的。并用自动的或手工的方式进行配置状态间的转换。方式进行配置状态间的转换。

Page 61: 软件工程第七章( 3-2 ) 软件测试

61

www.fang.csai.cn

安全性测试安全性测试安全性测试是要检验安全性测试是要检验在系统中已经存在在系统中已经存在的系统安全性、保密性措施是否发挥作的系统安全性、保密性措施是否发挥作用,有无漏洞。用,有无漏洞。

力图破坏系统的保护机构以进入系统的力图破坏系统的保护机构以进入系统的主要方法有以下几种:主要方法有以下几种: 正面攻击或从侧面、背面攻击系统中正面攻击或从侧面、背面攻击系统中易受损坏的那些部分;易受损坏的那些部分;

以系统输入为突破口,利用输入的容以系统输入为突破口,利用输入的容错性进行正面攻击错性进行正面攻击;;

Page 62: 软件工程第七章( 3-2 ) 软件测试

62

www.fang.csai.cn

申请和占用过多的资源压垮系统,申请和占用过多的资源压垮系统,以破坏安全措施,从而进入系统;以破坏安全措施,从而进入系统;

故意使系统出错,利用系统恢复的故意使系统出错,利用系统恢复的过程,窃取用户口令及其它有用的信过程,窃取用户口令及其它有用的信息;息;

通过浏览残留在计算机各种资源中通过浏览残留在计算机各种资源中的垃圾(无用信息),以获取如口令,的垃圾(无用信息),以获取如口令,安全码,译码关键字等信息;安全码,译码关键字等信息;

浏览全局数据,期望从中找到进入浏览全局数据,期望从中找到进入系统的关键字;系统的关键字;

浏览那些逻辑上不存在,但物理上浏览那些逻辑上不存在,但物理上还存在的各种记录和资料等。还存在的各种记录和资料等。

Page 63: 软件工程第七章( 3-2 ) 软件测试

63

www.fang.csai.cn

可使用性测试可使用性测试可使用性测试主要从使用的合理性和方可使用性测试主要从使用的合理性和方便性等角度对软件系统进行检查,发现便性等角度对软件系统进行检查,发现人为因素或使用上人为因素或使用上的问题。的问题。

要保证在足够详细的程度下,用户界面要保证在足够详细的程度下,用户界面便于使用;对输入量可容错、响应时间便于使用;对输入量可容错、响应时间和响应方式合理可行、输出信息有意义、和响应方式合理可行、输出信息有意义、正确并前后一致;出错信息能够引导用正确并前后一致;出错信息能够引导用户去解决问题;软件文档全面、正规、户去解决问题;软件文档全面、正规、确切。确切。

Page 64: 软件工程第七章( 3-2 ) 软件测试

64

www.fang.csai.cn

可支持性测试可支持性测试这类测试是要验证系统的支持策略对于这类测试是要验证系统的支持策略对于公司与用户方面是否切实可行。公司与用户方面是否切实可行。

它所采用的方法是它所采用的方法是 试运行支持过程试运行支持过程 (( 如对有错部分打如对有错部分打补丁的过程,热线界面等补丁的过程,热线界面等 )) ;;

对其结果进行质量分析;对其结果进行质量分析; 评审诊断工具;评审诊断工具; 维护过程、内部维护文档;维护过程、内部维护文档; 修复一个错误所需平均最少时间。修复一个错误所需平均最少时间。

Page 65: 软件工程第七章( 3-2 ) 软件测试

65

www.fang.csai.cn

安装测试安装测试安装测试的目的不是找软件错误,而是安装测试的目的不是找软件错误,而是找安装错误。找安装错误。

在安装软件系统时,会有多种选择。在安装软件系统时,会有多种选择。 要分配和装入文件与程序库要分配和装入文件与程序库 布置适用的硬件配置布置适用的硬件配置 进行程序的联结。进行程序的联结。

而安装测试就是要找出在这些安装过程而安装测试就是要找出在这些安装过程中出现的错误。中出现的错误。

Page 66: 软件工程第七章( 3-2 ) 软件测试

66

www.fang.csai.cn

安装测试是在系统安装之后进行测试。安装测试是在系统安装之后进行测试。它要检验:它要检验: 用户选择的一套任选方案是否相容;用户选择的一套任选方案是否相容; 系统的每一部分是否都齐全;系统的每一部分是否都齐全; 所有文件是否都已产生并确有所需所有文件是否都已产生并确有所需要的内容;要的内容;

硬件的配置是否合理,等等。硬件的配置是否合理,等等。

Page 67: 软件工程第七章( 3-2 ) 软件测试

67

www.fang.csai.cn

过程测试过程测试在一些大型的系统中,部分工作由软件在一些大型的系统中,部分工作由软件自动完成,其它工作则需由各种人员,自动完成,其它工作则需由各种人员,包括操作员,数据库管理员,终端用户包括操作员,数据库管理员,终端用户等,按一定规程同计算机配合,靠人工等,按一定规程同计算机配合,靠人工来完成。来完成。

指定由人工完成的过程也需经过仔细的指定由人工完成的过程也需经过仔细的检查,这就是所谓的过程测试。检查,这就是所谓的过程测试。

Page 68: 软件工程第七章( 3-2 ) 软件测试

68

www.fang.csai.cn

互连测试互连测试互连测试是要验证两个或多个不同的系互连测试是要验证两个或多个不同的系统之间的互连性。统之间的互连性。兼容性测试兼容性测试这类测试主要想验证软件产品在不同版这类测试主要想验证软件产品在不同版本之间的兼容性。有两类基本的兼容性本之间的兼容性。有两类基本的兼容性测试:测试: 向下兼容向下兼容 交错兼容交错兼容

Page 69: 软件工程第七章( 3-2 ) 软件测试

69

www.fang.csai.cn

容量测试容量测试容量测试是要检验系统的能力最高能达容量测试是要检验系统的能力最高能达到什么程度。例如,到什么程度。例如, 对于编译程序,让它处理特别长的对于编译程序,让它处理特别长的源程序;源程序;

对于操作系统,让它的作业队列对于操作系统,让它的作业队列“满员”;“满员”;

对于信息检索系统,让它使用频率对于信息检索系统,让它使用频率达到最大。达到最大。

在使系统的全部资源达到“满负荷”的在使系统的全部资源达到“满负荷”的情形下,测试系统的承受能力。情形下,测试系统的承受能力。

Page 70: 软件工程第七章( 3-2 ) 软件测试

70

www.fang.csai.cn

文档测试文档测试这种测试是检查用户文档这种测试是检查用户文档 (( 如用户手如用户手册册 )) 的清晰性和精确性。的清晰性和精确性。

用户文档中所使用的例子必须在测试中用户文档中所使用的例子必须在测试中一一试过,确保叙述正确无误。一一试过,确保叙述正确无误。