一、测试基本信息
测试目标:
1、了解用户在不用搜索框的情况下,通过索引或其他方式找到目标的情况如何;
2、了解用户是否可以在要求下使用有关弹幕的一系列设定;
3、了解用户可否在哔哩哔哩网站中找到购票页面。
测试的规则制定:
1、整套测试中不可以使用搜索框或者任何搜索引擎进行答案查找; 2、在测试开始前先阅览任务及要求; 3、每个任务开始的起初页面均是哔哩哔哩的首页。
测试信息
1、用户类型:
使用频率(不经常使用的用户、经常使用的用户)
2、测试用户 1).不经常使用哔哩哔哩网站的用户 4名 2).经常使用哔哩哔哩网站的用户 4名
3、测试时间:19年6月9日-6月19日
4、测试方式: 线下、录音
二、二分式成功任务
任务设计:
1、找到哔哩哔哩的直播并进入到单机直播的分区
2、不使用搜索框,找到《小林家的龙女仆》的播放页面
3、播放《小林家的龙女仆》13集,输入并发送弹幕“完结撒花”(格式:顶部弹幕,颜色为黄色)
成功的标准:
1、成功找到并进入到单机直播的分区页面
2、在不使用搜索框条件下成功找到要求的播放页面
3、成功发送弹幕且符合要求格式
失败的情况:
1、所用时间过长(任务一:超过30s,不包含30s;任务二:超过60s,不包含60s;任务三:超过120s,不包含120s)
2、不符合某一要求格式
3、需要接受主持人的帮助
4、参加者主动喊停,放弃任务
三、成功等级任务
1、不使用搜索框,找到“广州Animenz Live2019动漫音乐会”的购票页面
2、在《小林家的龙女仆》13集中,屏蔽关键词为“完结”的文本,屏蔽彩色弹幕和特殊弹幕
成功等级:(基于用户完成任务的不同程度进行审定)
完成任务 需要帮助 不需要帮助
部分完成任务 需要帮助 不需要帮助
任务失败 用户认为完成了,实际没有 用户放弃
四、任务时间的计算规则:
[开始]先让参加者阅览任务内容,对任务有疑惑可向主持人提问;从网站的首页作为起点,当参加者喊开始时,主持人尽可能快按下计时器计时 [结束]参加者在完成任务时喊结束,主持人按下计时器
五、任务分析图表
1、按照任务来呈现二分式成功率:
任务1:成功率:87.5%,失败率:12.5%
任务2:成功率:50.0%,失败率:50.0%
任务3:成功率:75.0%,失败率:25.0%
结论:二分式的任务总体上成功率较失败率高,在任务二中,失败率较其他两个任务高,该任务所对应的的索引摆放位置问题可能需要调整
2、成功等级呈现:
结论:参加测试者都能够完成任务或部分完成任务,任务4,5对应的问题:购票页面和屏蔽弹幕设置并不会使用户完全无法完成操作,但在用户体验上会降低用户的满意度
3、每个任务的平均时间:
4、按照用户类型来呈现二分式成功率:
经常使用的用户:成功率75% 失败率25%
不经常使用的用户:成功率66.7% 失败率33.3%
结论:在二分式任务中,经常使用的用户和不经常使用的用户的成功失败率存在一定的差异,表明在寻找单机直播页面、使用索引和发送有要求弹幕这块,使用频率高的用户能更快速完成任务。
5、按照用户类型来呈现成功等级任务:
结论:经常使用该网站的用户与不经常使用该网站的用户在完成这两项任务时并没有显著差异,说明购票页面以及屏蔽弹幕设置的找寻设置与用户的使用频率并无大关联
结论:
1、经常使用的用户与不常使用的用户在使用索引和发送弹幕相关设置中,有较为显著的差异,使用频率高的用户比较能快速完成使用索引来进行查找,以及发送有要求弹幕,而使用频率不高的用户会有所犹豫与疑惑,导致有效性以及速度上都有所下降。
2、经常使用该网站的用户与不经常使用该网站的用户在完成这两项任务时并没有显著差异,说明购票页面以及屏蔽弹幕设置的找寻设置与用户的使用频率并无大关联。但在完成任务时仍存在需要帮助的情况,用户自身完成任务的话可能会绕更大的圈子来完成任务,导致用户的满意度降低,影响有效性。
3、bilibili的单机直播页面可从主直播页面处进行跳转,但如果直接进入到直播分支下的游戏直播便会绕圈子才可找到单机直播分区;会在一定程度上降低用户对目标查找的耐心值,从而降低用户体验。
4、在番剧索引页面能最快找到该动画,但许多用户无法第一时间找到该导航栏分支,应当把番剧索引这一栏提前几个栏位。
5、弹幕的发送设置,据测试结果来看是可行的,但与弹幕设置相邻太近且相似,用户会有所混淆疑惑。
6、购票的页面在主页顶端的左上角且颜色稍浅,并且导航栏的名字为“会员购”,用户第一反应这是购买会员的,这一栏位的名称需要作出修改,且导航栏的颜色需要适当加深。
7、弹幕的屏蔽设定位于视频的右侧,在弹幕列表的旁边“...”点击后才展开有关弹幕的屏蔽设定,用户在视频页面中有点难以发现该操作区域,对弹幕的有关设置有:弹幕设定。弹幕发送设定和弹幕屏蔽设定,其中屏蔽设定位于另一处,也应当作出相应的调整,将同类型的设置均放置一处。
六、严重性评估:
严重性等级制定:
对用户体验的影响:
0=低 这类问题会是用户感到一些负面情绪例如沮丧烦躁等,或是用户走了错误的操作路径,但用户仍能找回来并完成任务,会稍微降低用户的操作效率或用户的满意程度
1=中 这类问题会提高任务的难度,但不会直接导致任务的失败,参加者要绕很多弯子才能找到需要寻找的目标,会影响参加者任务完成的有效性,同时也很有可能会影响效率和满意度
2=高 所有会直接导致任务失败的问题,当用户遇到这类问题基本没有可能再继续完成任务,这类问题对任务完成的效率、有效度以及用户体验的满意度都会有极大的影响
对商业目标的影响:
0=低 参加者不能快速地完成相应的目标,但也能够完成任务,在期间可能会有些许卡顿,对商业目标/产品目标/用户需求会产生一点偏离
1=中 参加者在完成目标过程中会受挫,或是需要绕圈子才能解决任务,花费了较长的时间,对商业目标/产品目标/用户需求产生较大的偏离
2=高 参加者无法完成任务,任务失败且几乎没有可能再继续完成任务,对商业目标/产品目标/用户需求会造成完全偏离
对技术、实现成本的影响:
0=低 用户花费的成本普遍一致且拥有的技术能力足以完成任务,与技术/实现成本有一点偏离
1=中 用户花费的成本和技术能力都有一定的差异,可能会导致任务的失败,会造成技术/实现成本的明显不一致
2=高 用户花费的成本梯度差异大并且技能技术难以实现目标,与技术/实现成本完全偏离
评估结果:
**结果:
网站的购票页面通道在此次的严重性评估中占最高,急需改善;
而弹幕设置和索引位置的问题在此次的评估中,得到了较为中等的影响结果,但也存在着一定的问题,如弹幕的屏蔽设定位于视频的右侧,在弹幕列表的旁边“...”点击后才展开有关弹幕的屏蔽设定,用户在视频页面中有点难以发现该操作区域,对弹幕的有关设置有:弹幕设定。弹幕发送设定和弹幕屏蔽设定,其中屏蔽设定位于另一处,也应当作出相应的调整,将同类型的设置均放置一处。
在番剧索引页面能最快找到该动画,但许多用户无法第一时间找到该导航栏分支,可尝试把番剧索引这一栏提前几个栏位。
七、客户旅程地图
版权声明:本文出自51Testing会员投稿,51Testing软件测试网及相关内容提供者拥有内容的全部版权,未经明确的书面许可,任何人或单位不得对本网站内容复制、转载或进行镜像,否则将追究法律责任。