做“准确”的性能测试

昨天看了测试大侠pent翻译的一篇文章《基于用户体验的性能测试》，原文名称为《User Experience, Not Metrics》，直译为《用户体验，而不是度量》，大侠翻译的很准确，不愧为前辈。这篇文章的观点很好，最近我正好也想谈谈类似的话题。

　　看坛子里多数网友都在谈压力测试，讨论LoadRunner的使用，气氛热烈而又和谐，但我今天可能要给很多人泼一盆冷水了，“你做的压力测试“准确”吗？”，这里我说的

　　“准确”有两层含义：

　　符合现实：你模拟的负载测试真的能反映实际运行的负载吗？

　　精确：你模拟测试中采集的度量数据足够详细、粒度够小吗？

　　当然，借助于专业的压力测试工具，只要添加足够多的monitor，“精确”应该不难，但“符合现实”吗？以我作为过来人的经验，大多数的压力测试并不准确。为什么这么说，请往下看这张图。

　　上图是大多数人得到的一个典型的测试结果，看上去很美，但它不符合现实情况。你的计算机、测试脚本有足够的耐心等待，但实际用户没有。在这个讲究效率、信息爆炸、社会高速运转的现实世界是什么样呢？

　　另外用户对网站的熟悉程度、网络速度，甚至用户的计算机水平，都会影响用户的操作速度，进而对实际的负载形成不同的影响。