-
Pairwise Testing (变量值对测试)
2009-08-27 10:41:46
关于测试有一条众所周知的普遍定律就是：没有100％覆盖的测试面。而另一方面的一个不争的事实却是：庞大的测试组合不可避免。举例来说，我曾经测过一个转码软件，该软件支持wmv格式的转码输出，对于wmv格式具体的设置参数包括这么几项：
codec：wmv-7, wmv-8, wmv-9, wmv-vc1
frame. size: 128x96, 176x144, 320x240, 352x288, 480x270, 640x480, 720x480, 720x576
frame. rate: 14.97, 15, 23.97, 25, 29.97
aspect ratio: 4:3, 16:9
bitrate mode: 1-pass CBR, 2-pass CBR, 2-pass VBR
所有的输出变量值的组合是： 4x8x5x2x3=960
毫无疑问，这是一个比较大的测试覆盖组合，那么是每次测试都一条不落的执行一遍还是可以有其它方式呢？这时候一种称之为pairwise testing的测试方法就派上用场了。
这种测试方法不是去组合所有“变量值”而是组合所有“变量值对”。目前来说，没有什么软件理论能够论证这种测试方法的可行性，提出这种测试策略是基于如下假设：即大多数的软件缺陷要么是单模式缺陷（注一）要么是双模式缺陷（注二），而“变量值对”测试就是建立了一个同时测试单模式和双模式缺陷的最小子集，不过已记载的一些数据却说明了该方法的实际有效性。如：AT&T在对其基于局域网的邮件系统进行的测试中，应用pairwaise testing得到的 1000条测试用例比其原有的1500条测试用例多抓出20％的缺陷而测试精力却减少了50％。National Institute of Standards and Technology在一项对医疗设备测试所进行的15年追踪中发现，有98％的软件缺陷可以通过“变量值对”测试抓获。而另一项对Mozilla网页浏览器的缺陷分析显示，76％的缺陷可以通过“变量值对”测试抓获。
那么如何实际运用这种测试方法呢？两个途径。
第一，James Bach基于allpairs算法写了一个小工具可以用来生成“变量值对”表。这个工具可以从这里下载http://www.satisfice.com/tools.shtml。 这个exe工具用起来也很简单。首先在excel里把所有的变量以及可取值罗列如下：
codec
frame. size
frame. rate
aspect ratio
bitrate mode
wmv-7
128x96
14.97
4:03
1-pass CBR
wmv-8
176x144
15
16:09
2-pass CBR
wmv-9
320x240
23.97
2-pass VBR
wmv-vc1
352x288
25
480x270
29.97
640x480
720x480
720x576
存为.txt格式，然后将该txt文件（例如input.txt）放在和exe工具同一个目录下，进入命令行运行窗口，在exe工作目录下运行命令allpairs.exe input.txt > output.txt, 回车，你会看到output.txt生成，将里面的内容全部拷贝到excel表格里即可。上面例子得出的结果如下：
case
codec
frame. size
frame. rate
aspect ratio
bitrate mode
1
wmv-7
128x96
14.97
4:03
1-pass CBR
2
wmv-8
128x96
15
16:09
2-pass CBR
3
wmv-8
176x144
14.97
4:03
2-pass VBR
4
wmv-7
176x144
15
16:09
1-pass CBR
5
信息架构 & 应用模式
2009-08-25 22:38:17
用户行为模式
2009-08-23 22:09:07
（转）WINDOWS 系统文件详解
2009-08-18 14:26:41
简易打造自己的自动构建任务
2009-08-18 14:01:00
如何写测试人员的周报(或日报)
2009-08-17 20:58:06
众所周知,在职场,总有各式各样的报告要看,要写,而最常规的莫过于周报(或者日报)了.这类报告通常是关于个人的工作情况或者项目的进展情况等.那么作为一名测试人员,该如何写周报呢(若有日报需要,以此类推).通常在写一份报告之前考虑这么两个方面会让你的报告更具阅读性,那就是:报告要表达的主题是什么,报告的观众/听众是谁.对于同一个(或者相似的)主题,观众/听众不一样,报告所需要陈述的具体内容通常也是不一样的.下面我想从测试员和测试组长(负责人)的角度分别罗列一下测试周报的模式和内容.一. 测试员 (tester)测试员的周报一般来说是汇报给自己的组长,就我自己的工作经历来说,一般软件公司测试组长兼具项目以及行政两个方面,也就是说一方面主导分配到这个测试小组的测试任务,另一方面也要关注组员的工作绩效以及团队发展等.所以汇报给测试组长的周报就要比较详细的从项目和团队合作方面同时阐述自己一周的工作情况.大概可以包括这个几点:１.内容概要罗列以及花费时间列表阐述本周自己主要的工作情况,譬如参与了哪几个项目的哪些相关测试,出席了几个公司会议,参加了几个公司内(或外)的相关培训课,阅读了什么工作相关的资料/书籍等,同时(推荐以表格的形式)列出每一项工作(或相关)内容所花费的时间(work hour)２.执行的测试用例数目按照项目分别列出,本周执行了多少测试用例,其中pass多少,fail多少,有多少用例被block了不能执行(需要另外列出具体的被block原因,如某个bug或者某项测试资源没有到位),还有多少已分配的测试用例没有完成.这些信息推荐以表格形式给出,参见下面的草图:Pass Fail Blocked Remaining Project A 25 3 2 16 ...... 如果执行了ad-hoc或者exploration测试,可以考虑以表格形式列出测试内容.３.提交的bug具体数目体现测试人员绩效一个重要的方面是提交的bug数量和质量.所有在这里列出本周里在每个测试项目中你提交的有效bug数,无效bug数(重复的bug,不能复现的bug),验证的bug数(有效修复-fixed,无效修复-reject),这些信息同样推荐以表格形式给出,参见下面的草图:Submitted-Valid Submitted-Duplicated Submitted-Unreproduciable Verify-Fixed Verify-Reject Project A 5 2 0 8 3 ...... ４.其它任何工作相关的其余内容.譬如你希望多一个测试平台,你需要某本专业书籍等等等等.
版权声明：本文出自小丫头的51Testing软件测试博客：http://www.51testing.com/?18819
原创作品，允许转载，转载时请务必以超链接形式标明文章原始出处 、作者信息和本声明，否则将追究法律责任。二.测试组长测试组长的周报通常来说覆盖两个方面,一是项目相关情况,这个内容的目标读者是所有和项目相关的人员(项目经理,产品经理,开发人员,测试人员,发布人员等),另一个方面是关于团队管理方面(有时候会把这一项单独放在一份报告里发给测试经理,毕竟项目相关人员只关注项目的测试进展情况,基本不关心测试团队成员的具体工作内容)１.严重问题任何阻止测试顺利进行的issue都要在这里醒目列出,同时要注明希望问题得到解决的最后期限,如果知道报告接受者中的谁可以帮助推动解决这个问题,要明确指到该人姓名.２.各个项目测试用例完成情况可以用类似于下面的柱状图来表示
(如有必要,可以给出具体的链接指向测试用例管理库中本轮测试的详细内容和结果)(统计的bug数量可以是所有优先级/严重程度的bug总和,也可以只取第一第二优先级/严重程度的bug进行统计,因为很多时候,这类bug的数量直接影响产品发布与否,而这个,正是项目相关人员最关心的)例见下图
(如有必要,给出具体链接指向bug管理库中该项目所有bug的详细内容)(这个图可以让看报告的人一目了然当前项目中的主要问题存在哪里,是功能上的,还是界面上的,还是通讯上的,还是其它等等等等)例见下图(具体分类根据不同产品不同项目而不同)
可以包括:有多少测试人员参与,每个人在各个项目中花费的时间,有时候也可以列出每个测试员执行了多少测试用例,提交了多少bug,验证了多少bug等信息可以参见如下表格:
６.任何项目相关的其它杂事
暂时就想到这么多了,欢迎大家指点意见.
版权声明：本文出自小丫头的51Testing软件测试博客：http://www.51testing.com/?18819
原创作品，允许转载，转载时请务必以超链接形式标明文章原始出处 、作者信息和本声明，否则将追究法律责任。Audio and Video codec summary
2009-08-14 14:23:19
（All the content is digested from wikipedia)
AAC: Advanced Audio Codec
Ø AAC is developed with the cooperation and contribution of companies including Fraunhofer IIS, AT&T Bell Lab, Dolby, Sony and Nokia, and is officially declared by Motion Picture Expert Group in 1997.
Ø AAC is specified both as Part 7 of MPEG-2 standard and Part 3 of MPEG-4 standard. It is designed to be the successor of MP3.
Ø Support: 8kHz – 96kHz, 48 Channels.
Ø No licenses or payments are required to be able to stream or distribute content in AAC format; however, a patent license is required for all manufacturers or developers of AAC codecs.
Ø Supported Portable Players: Apple iPod, Microsoft Zune, SanDisk Sansa, Sony PlayStation Portable, Nintendo DSi…
Ø Supported Mobile Phones: Nokia, Motorola, Samsung, Sony Ericsson, BenQ-Siemens, Philips.
Ø Almost all the current computer media players include AAC decoder.
AC-3/Dolby Digital
Ø Dolby Digital (AC-3) is the marketing name for a series of lossy audio compression technologies developed by Dolby Lab.
Ø Dolby Digital includes similar technologies, which include Dolby Digital, Dolby Digital EX, Dolby Digital Live, Dolby Digital Surround EX, Dolby Digital Plus, Dolby Digital TrueHD.
Ø Dolby Digital codec has some aliases: DD, Dolby Surround AC-3 Digital, Dolby Stereo Digital, Dolby SR-Digital, SR-D, Audio Coding 3, AC-3, Audio Codec 3, Advanced Codec 3, ATSC A/52.
ADPCM
Ø It is a variant of DPCM (differential pulse-code modulation) that varies the size of the quantization step, to allow further reduction of the required brandwidth for a given signal-to-noise ratio.
It is developed in the early 1970s at Bell Labs.
AMR: Adaptive multi-rate compression
Ø It is a patented audio data compression scheme optimized for speech coding.
Ø It is adopted as the standard speech codec by 3GPP.
Ø Support: 12.2, 10.2, 7.95, 7.40, 6.70, 5.90, 5.15 and 4.75 kbps.
AMR-WB: Adaptive Multi Rate-WideBand:
Ø It is a patented speech coding standard developed after the AMR suing similar technology.
AMR-WB+: Extended Adaptive Multi Rate-WideBand
Ø It is an audio codec that extends AMR-WB.
Ø It adds support for stereo signals and higher sampling rates.
Cinepak
Ø It is a video codec designed to encode 320x240 resolution at 1x CD-ROM transfer rates.
Ø It was the primary video codec of early version of QuickTime and Microsoft Video for Windows, but later superseded by Sorenson Video, Intel Video and most MPEG-4.
DivX
Ø DivX codec uses lossy MPEG-4 compression.
Ø Version:3.xx->4.0->5.0->6.0->7.0...
DTS
Ø DTS: Digital Theater System is a multichannel digital surround sound format.
Ø Variants: DTS 70 mm, DTS-ES, DTS Neo:6, DTS 96/24, DTS-HD, DTS Connect…
ffdshow
Ø ffdshow is a media decoder and encoder supporting MPEG-4, AVC and numerous other video and audio formats as well.
Ø It is free software released under the GPL license, running on Windows.
FFV1
Ø It stands for “FF video codec 1”.
Ø It is a lossless intra-frame. video format.
Grayscale
Ø Grayscale (or grayscale) digital image is an image in which the value of each pixel is a single sample.
Ø Grayscale images are with only two colors, black and white.
H.263
Ø It is developed by ITU-T Video Coding Experts Group (VCEG) based on experience from H.261.
It is designed as a low-bitrate compressed format for videoconferencing.
H.264/MPEG-4 AVC
Ø H.264/MPEG-4 AVC is a standard for video compression which is developed by the ITU-T Video Coding Experts Group (VCEG) together with MPEG.
Ø H.264 standard is a “family of standards” which includes below profiles:
Constrained Baseline Profile (CBP)
Baseline Profile (BP)
Main Profile (MP)
Extended Profile (XP)
High Profile (HiP)
High 10 Profile (Hi10P)
High 4:2:2 Profile (Hi422P)
High 4:4:4 Predictive Profile (Hi444PP)
High 10 Intra Profile
High 4:2:2 Intra Profile
High 4:4:4 Intra Profile
CAVLC 4:4:4 Intra Profile
Scalable Baseline Profile
Scalable High Profile
Scalable High Intra Profile
HE-AAC: High-Efficiency Advanced Audio Coding.
Ø It is a lossy data compression scheme for digital audio.
Ø It is an extension of Low Complexity AAC (AAC-LC).
Ø HE-AAC v1, HE-AAC v2.
Huffman
Ø Huffman coding is an entropy encoding algorithm used for lossless data compression.
Indeo
Ø Indeo Video is a video codec developed by Intel then sold to Ligos Corporation in 2000.
Ø Versions: Indeo 2 and 3 have decoders in FFmpeg
Indeo 4 and 5 are not supported by any open source decoders
Indeo 5 decoders exist for Windows, Mac…
Indeo 5.11 is a used on all versions of Windows except Vista and Win7
Indeo 5.2 is created for Vista.
LPCM: Liner pulse code modulation
Ø It is a particular method of pulse code modulation.
Ø PCM and LPCM are referred to the format used in WAV files.
Ø LPCM data also may be commonly stored in other formats such as AIFF.
Motion JPEG
Ø It is an informal name for a class of video formats where each video frame. or interlaced field of a digital video sequence is separately compressed as a JPEG image.
Ø It is now used by many portable devices with video-capture capability.
MPEG-1 Audio
Ø Lossy data compression.
Ø It is based on the existing MUSICAM and ASPEC audio formats.
Ø It including the three audio “layers” now known as MP1, MP2, MP3, is finalized by December 1991.
MPEG-1 Audio Layer I: mp1
Ø Support: 32kHz, 44.1kHz, 48kHz, 32kbps, 64kbps, 96kbps, 128kbps, 160kbps, 192kbps, 224kbps, 256kbps, 288kbps, 320kbps, 352kbps, 384kbps, 416kbps, 448kbps
MPEG-1 Audio Layer II: mp2
Ø MP2 is a dominant standard for audio broadcasting.
Ø Support: 8, 16, 24, 32, 40, 48, 56, 64, 80, 96, 112, 128, 144, 160, 192, 224, 256, 320, 384kbps; 16, 22.05, 24, 32, 44.1, 48kHz
Ø Support up to 5 full range audio channels and LFE-channel
Ø Support mono, stereo, joint stereo, dual channel (uncorrelated) formats.
MPEG-1 Audio Layer III: mp3
Ø It is a patented digital audio encoding format for consumer audio storage and for the transfer and playback of music on digital audio players.
Ø Support: 32, 40, 48, 56, 64, 80, 96, 112, 128, 144, 160, 192, 224, 256 and 320 kbps; 32, 44.1 and 48 kHz
Ø The proprietary (unofficial) MPEG-2.5 supports additional 8, 11.025 and 12 kHz.
Ø MP3 LAME encoder supports bit rate up to 640kbps.
MPEG-2
Ø It is a standard which describes a combination of lossy video compression and lossy audio data compression methods that permit storage and transmission of movies using currently available storage media and transmission bandwidth.
Ø MPEG-2 audio multichannel encoding with up to 5.1 channels.
MPEG-4
Ø It is a patented collection of methods defining compression of audio and video digital data.
Ø Key parts of MPEG-4 are MPEG-4 Part 2 and MPEG-4 Part 10 (AVC/H.264).
PCM: Pulse-code modulation
Ø a digital representation of an analog signal where the magnitude of the signal is sampled regularly at uniform. intervals, then quantized to a series of symbols in a numeric (usually binary) code.
Ø Compression techniques: DPCM, ADPCM, Delta modulation
RealVideo
Ø RealVideo is a proprietary video format developed by RealNetworks.
Ø It is supported on Windows, Mac, Linux, Solaris, and several mobile phones.
RGB
Ø The RGB color model is an additive color model in which red, green and blue light are added together in various ways to reproduce a broad array of colors.
Ø Typical RGB input devices are color TV and video cameras, image canners and digital cameras.
Ø Typical RGB output devices are TV sets of various technologies (CRT, LCD, plasma. Etc), computer and mobile phone displays, video projectors, etc.
Sorenson
Ø Sorenson codec is a proprietary digital video codec devised by Sorenson Media Inc.
Ø It is used in Apple’s QuickTime and Adobe Flash.
Ø There are two different proprietary codecs known as: Sorenson video” and “Sorenson Spark” (Sorenson H.263).
Theora/VP3
Ø It is a vbr video compression scheme.
Ø It is the successor of On2 VP3.
Ø VP3 was originally a proprietary and patented video codec developed by On2 Technologies. On2 then donated VP3 to the Xiph.org Foundation which is the developer of Theora.
VC-1
如何进行软件的安装卸载测试
2009-08-14 14:16:17
根据自己所在项目的实际情况并参考了网上一些资料，整理了下面关于如何进行安装卸载测试的概要。（我自己的主要指责包括：做安装包，准备测试用例，组织搭建测试环境并进行测试）
准备阶段：
1． 确定测试平台操作系统 （Windows XP SP3, Windows Vista Ultimate SP2, Windows Server 2003, Windows Server 2008…..）
2． 确定测试平台硬件条件 (主板、内存、显卡、硬盘、光驱…..)
3． 根据以上两项配置出具体的测试平台分布表 （例子见图一）
图一：
4． 准备安装文件检查表 （负责做安装包的小组应该可以提供这个检查表，类似于下图二）
图二：
5． 确定软件安装流程图（在测试开始之前准备这个流程图可以参考软件以前版本的安装流程，同时咨询做安装包的小组得到最新的更新情况，等到正式的测试版本拿到手可以再微调这个流程图，例子见图三）
图三：
6． 第三方工具：注册表快照(RegSnap)，卸载工具(Revo Uninstaller)，系统备份工具(Ghost)
7． 自动化测试工具以及脚本准备 （如果部分或者全部测试是自动化进行，准备好测试工具以及测试脚本）
8． 准备需要预装的第三方软件（譬如防火墙、硬盘实时检测、影音播放器等）。
9． 根据图一进行机器配置、系统安装以及备份 （这项工作比较耗时）
10. 准备好测试用例 （具体测试什么，怎么测试，这个可以参考下面的“测试大纲”部分）
到这里，基本准备工作就算完成了，如果你是测试负责人，还要从项目管理的角度考虑测试周期，所需人力资源等因素 （可以结合以前的历史数据和目前的人力资源分布以及项目需求，这方面的细节不在本篇讨论）
测试大纲
（这里只讨论测试的覆盖内容，不关注测试是通过手工还是自动完成。）
（安装之前和之后进行注册表快照并比对，确定软件安装带来的注册表修改符合预期设定）。
（任何一次安装完成以后，对比如上图二的安装文件检查表确定是否所有的文件都装在正确的地方）
（任何一次卸载完成以后，对比如上图二的安装文件检查表确保所有的安装文件已经被移除）
1． 根据上图三的测试流程图，按照默认设置，完成安装。
2． 根据上图三的测试流程图，安装过程中，改变每一个用户可以自定义的选项为非默认值，完成安装。
3． 对于上图三的测试流程图，在每两个步骤之间都进行“取消”操作，确保安装中止的功能正常。
4． 以不同的用户权限进行安装和卸载测试 （管理员，受限用户）
5． 安装到不同硬盘格式的分区（FAT16, FAT32, NTFS）
6． 从不同的路径安装（本地硬盘，网络路径，移动设备，虚拟机）
7． 安装到不同的目标地（本地硬盘，网络路径，移动设备，虚拟机）
8． 选择安装目标分区小于软件安装所需要的磁盘空间大小
9． 选择一个不存在的目录作为软件安装的目标路径
10．安装过程中机器进入待机、休眠、关机等状态
11． 安装过程中检测到旧版本 （这个既包括本身的测试软件，也包括任何随着安装包一起安装的第三方软件），确定卸载或者升级功能正常。
12．从控制面板卸载软件
13． 通过第三方工具卸载软件
14． 通过软件自己的卸载程序卸载软件
欢迎任何意见、问题。
软件测试人员职业规划参考
2009-08-14 10:57:16
根据我自己的工作经历以及对可及的软件测试环境的观察,国内软件测试差不多算是一个门槛比较低的行业,可能一般做了两三年测试的人都会有一些迷茫,不知道长远的职业生涯如何规划.看到网上有人画了一张给软件测试人员的职业发展建议,觉得很有借鉴意义,转过来贴在这里.
SCM: Software Configuration Management (软件配置管理)
QA: Quality Assurance (质量保证)
IS: Information System (信息系统)
在软件测试行业,想走的更远,攀的更高,除了一个清晰可行的目标,还有必要规划一个比较完整的知识结构图,并根据技术和行业的发展动态及时调整,假以时日,辛勤耕耘,相信每个人都能收获自己理想的果实.
标题搜索
我的存档
数据统计
- 访问量: 12967
- 日志数: 9
- 图片数: 2
- 建立时间: 2007-12-23
- 更新时间: 2009-08-27
RSS订阅
