自动运行测试套件
问题
如何让测试套件自动运行。
方案
我们经常会想要让测试程序自动运行。例如,我们可能安排4个自动测试套件在凌晨2:00开始执行,这样它就能连夜运行,而当早上来上班的时候就可以看到运行结果了。通过Windows Task Scheduler在Windows环境下可以很容易地实现任务调度。需要指定测试套件的可执行文件,想要它开始运行的时间,以及与测试套件运行相关的安全选项。
如果有好几个轻量级的自动化测试套件需要运行,则可以创建一个BAT文件,在这个文件里加上运行它们的命令,如:
@echo off echo Starting test automation sequence echo. C:\TestHarness1\bin\Debug\Run.exe C:\TestHarness2\bin\Debug\Run.exe C:\TestHarness3\bin\Debug\Run.exe echo. echo Test automation sequence complete |
如果测试套件本身就把测试用例结果记录到外部文件,那么这么做就可以了。如果测试套件只把测试用例结果输出到命令行程序,则可以通过系统重定向很容易把这些结果存储到外部文件:
C:\TestHarness1\bin\Debug\Run.exe > C:\Results\Harness1Results.txt
C:\TestHarness2\bin\Debug\Run.exe > C:\Results\Harness2Results.txt
注解
对于大多数轻量级的自动化测试场景来说,使用.BAT文件来管理各个测试程序是一种简单有效的方法。另一种方法是用C#写一个主测试套件(master harness),让这个主测试套件来协调并且调用其他的测试套件。我们可以使用System.Diagnostics.Process命名空间的 Start()方法来编写代码用于调用其他的测试套件:
Console.WriteLine("Starting test automation sequence\n"); Process.Start("C:\\TestHarness1\\bin\\Debug\\Run.exe"); Process.Start("C:\\TestHarness2\\bin\\Debug\\Run.exe"); Process.Start("C:\\TestHarness3\\bin\\Debug\\Run.exe"); Console.WriteLine("\n Test automation sequeue complete\n"); |
然后通过Task Scheduler 来调度这个主测试程序。使用.BAT文件的好处是它非常简单。使用C#编写主测试程序的好处是它可以做更多的事情,比如捕获异常,或者添加一个逻辑分支让某个测试套件只在另外一个测试套件的测试结果满足某些条件时才得以执行。
如果不用Windows Task Scheduler,还可以使用古老的at命令来让测试套件自动运行。但是通过at命令调度一个测试套件或者主测试套件让它自动运行,比使用 Windows Task Scheduler要麻烦得多。应该只在测试系统不支持Task Scheduler或者把一个新的测试系统集成到一个已经使用at命令的测试系统时,才考虑使用at命令。