《我眼中的百度QA》第一篇:百度QA的特点与核心价值(下半部分)

发表于:2013-4-10 09:58

字体: | 上一篇 | 下一篇 | 我要投稿

 作者:架构师Jack    来源:51Testing软件测试博客

  曾有多位互联网测试友人网上问我:“百度是如何进行面向互联网的快速测试的?”对于这个问题,我最大的感受是互联网研发速度与质量的平衡让百度的QA必须持续通过测试技术的改进来实现该目标,靠智慧的测试而不是加班来同时满足进度与质量的需求。为了满足这些需求百度质量部有大型测试平台如百度TIP(Test in production)系统、百度众测平台、百度MTC、分布式并行自动化测试等支持大多数产品组同时获得研发速度加快和研发质量提升的收益。我个人认为百度TIP应该是国内在beta测试领域做得非常智能和系统的beta测试系统,可大大提升beta测试的效率和质量。而百度众测平台则是国内第一个也是规模最大的众测社区,依靠互联网上的热心用户资源帮助产品尽早发现更多用户场景特有的问题,减少了百度QA测试时间资源和测试物料的投入,值得国内各公司借鉴如何更好地把用户吸引进来参与beta测试,花点钱是必须的,空手套白狼是不可能的,但是投入产出比是值得的。百度移动云测试MTC平台则通过对已有测试物料和测试资源的共享管理及自动化应用帮助各产品APP测试缩短了在兼容性测试领域和性能测试领域的测试时间,并且让各产品APP获得更广的测试覆盖从而获得更高质量的APP。

  除了这些公司级的测试平台帮助各产品QA加快测试速度外,在日常的测试工作中一线百度QA还会主动积极学习和广泛地应用业界优秀的测试技术:持续集成、code review实践、静态代码自动测试工具、环境一键搭建、监控系统、分布式并行测试、探索测试等都在大多数产品组普及落地,希望靠先进的技术手段生产力来提升测试效率,缩短研发测试周期。据我所知百度质量部的探索测试在国内应该是应用产品范围最广的,从windows客户端、移动APP、web产品都在例行应用,探索测试几乎覆盖百度所有产品线,应用和实施探索测试的QA数达到上百人以上,涌现出不少内部探索测试教练,实施了探索测试的产品在没有增加测试周期和测试人力的前提下能提前发现更多问题减少漏测,部分产品探索测试发现的问题数所占比例已达30%以上,提升了发现单个缺陷的测试效率。

  我个人认为对比靠延长工作时间和减少必做测试类型来加快研发速度的做法,靠主动持续应用各种新测试技术实践和成果是一种更可持久更科学更人性化的做法。关于百度如何进行“快测试”的咨询,我想这里已给出了一个已验证的解决方案了,希望值得各位同行借鉴和思考。

  对于当前很热门的“大数据”及大数据如何测试?我觉得百度有些实践值得大家了解,给大家一些大数据测试的启发思路。因为百度天生就是一个大数据公司,百度大数据系统的复杂度很高导致一直要求百度的QA既要保证高负载数据处理系统的稳定性、还要挖掘大数据中的badcase,尤其要擅长算法的测试。在保障高负载数据处理系统的稳定性领域,既有“线下百度”这样集系统化的稳定性测试方案与监控系统为一体的专项测试系统,也有不少申请了专利的可靠性测试工具来解决稳定性测试中异常构造和测试流量构造的问题。同时几乎所有产品线都通过百度的大型后台系统的稳定性测试实战培养起了该领域的测试高手。当然我也受益于百度的稳定性测试工作,通过为某百度第二大流量的产品进行稳定性测试方案的改进,在这里真正地把我过去在可靠性测试、压力测试、长时间测试领域的经验系统地结合起来形成了我自己完善的稳定性测试模型,并通过大数据处理系统的测试应用检验了我的稳定性测试模型的完整性,确保有各种测试方法可提前发现所有可产生稳定性问题的风险。

  另外为了更好地对大数据时代的数据挖掘和推荐效果算法进行效果评估,而不仅仅只是进行新算法程序正确性验证,百度的QA们还积极应用机器学习的思想、算法和工具对诸多产品的推荐效果算法进行产品算法集有效性的自动化评测,各产品线QA们设计的badcasse自动化挖掘系统在很多产品都能达到85%-95%的准确性,提供大量的量化数据帮助产品的算法设计者重新优化算法,而不只是修改算法的程序bug。同时为了更早更快更准地体现算法效果测试的价值,有的QA还积极进行该领域的其他创新,诸如:网页搜索的QA把badcase自动化挖掘系统与百度众测结合后大大减少了研发人员大规模分析与定位badcase的成本。图片搜索的QA甚至实现了线下badcase自动挖掘的算法,突破了搜索业界传统依靠线上用户数据进行用户体验测试的限制,能在大数据产品上线前未获得用户数据前就提前自动发现大量的badcase数据,为用户提供更好的推荐结果。大数据领域的测试涉及很多,由于我个人所见有限,就先给大家分享到这里。

  如果非要我用一句话来总结百度QA的特点那就是:“持续技术创新与积极学习”。

  平时在微博上测试同行们常讨论QA的核心价值是什么,甚至常有开发领域的老兵也来参与辩论。当然在百度内部也会有关于QA核心价值的讨论,从我了解的情况来看百度QA的核心价值在内部已得到了一些共识和不可替代性的证明。

  百度QA的第一个核心价值是:全流程质量保障中心

  全流程质量保证确保所有百度产品的程序质量。从需求/设计/编码/产品发布的全流程都会有QA介入并提供各类质量保障手段。从尽早发现问题,到缺陷预防,到减少发布后遗漏问题的影响都是百度QA投入和支撑的目标。百度产品的全生命周期的质量保障是百度QA的首要工作目标,也是在百度不可或缺的核心价值,大部分的QA都一直为将漏测率降低到千分之几,甚至是零漏测长期进行着持续的测试创新和技术改进工作。

21/212>
《2023软件测试行业现状调查报告》独家发布~

精彩评论

  • victoriay
    2013-4-15 12:16:58

    great,测试的价值不限于只是发现程序的bug

关注51Testing

联系我们

快捷面板 站点地图 联系我们 广告服务 关于我们 站长统计 发展历程

法律顾问:上海兰迪律师事务所 项棋律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2024
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪ICP备05003035号

沪公网安备 31010102002173号