Python脚本分析CPU使用情况

发表于:2017-12-04 09:44

字体: | 上一篇 | 下一篇 | 我要投稿

 作者:最爱Python的    来源:马哥Linux运维

  在这篇文章中,我将讨论一个工具,用以分析Python中CPU使用情况。CPU分析是通过分析CPU执行代码的方式来测量代码的性能,以此找到代码中的不妥之处,然后处理它们。
  接下来我们将看看如何跟踪Python脚本使用时CPU使用情况,重点关注以下几个方面:
  1、cProfile
  2、line_profiler
  3、pprofile
  4、vprof
  测量CPU使用率
  对于这篇文章,我将主要使用与内存分析中使用脚本相同的脚本,具体如下:
  另外,请记住,在PyPy2中,您需要使用与之配合的pip版本:
  并且其他依赖项也将被安装:
  cProfile
  在讨论CPU分析时,最常用的工具之一是cProfile,主要是因为它内置在CPython2和PyPy2中。这是一个确定性的分析器,意味着在运行程序时会收集一组统计数据,例如我们代码的各个部分的执行次数或执行时间。此外,cProfile在系统上的开销比其他内置的分析器(配置文件)要低。
  CPython2的用法很简单:
  如果您使用PyPy2:
  其输出如下:
  即使使用这个文本输出,很容易看到我们的脚本多次调用了list.append方法。
  如果我们使用gprof2dot,我们可以以图形的方式看到cProfile输出。要使用它,我们必须首先安装graphviz,之后是一些依赖包,最后在Ubuntu上使用如下命令:
  再次运行脚本:
  我们得到以下output.png文件:
  这样更容易看到一切。我们来仔细看看它的输出。您可以看到脚本中的函数调用如下:
  1、第一行:Python文件名,行号和方法名称
  2、第二行:代码块占用全部时间的百分比
  3、第三行:括号中,方法本身占全部时间的百分比
  4、第四行:调用函数的次数
  例如,在顶部的第三个红色方块中,方法primes占用了98.28%的时间,其中65.44%的内容在其中进行,调用了40次。其余的时间花在Python中的list.append(22.33%)和range(11.51%)中。
  作为一个简单的脚本,我们只需要重写我们的脚本,具体的如下所示:
  如果我们使用CPython2测量我们脚本的时间,
  还有PyPy2:
  我们通过使用PyPy2的CPython2和3.1X获得了不错的效果,下面是cProfile的调用流程图:
  您还可以以编程方式使用cProfile,例如:
  这在某些情况下很有用,例如多进程性能测量
  line_profiler
  此分析器在行级提供关于工作负载的信息。它使用Cython在C中实现,并将其与cProfile进行比较时发现其具有较小的开销。
  源代码可以在这里找到,也可以在这里找到PyPI页面。与cProfile相比,它具有一样的开销,不过却要花费12倍的时间来获取配置文件。
  要使用它,您需要先通过pip添加它:pip install pip install Cython ipython == 5.4.1 line_profiler(CPython2)。这个分析器的一个主要缺点是它不支持PyPy。
  就像使用memory_profiler一样,您需要在要分析的函数中添加一个装饰器。在我们的例子中,您需要在03.primes-v1.py中定义我们的primes函数之前添加@profile。然后调用它:
  你将得到如下输出:
  我们看到,重复调用list.append的两个循环花了最多的时间。
21/212>
《2023软件测试行业现状调查报告》独家发布~

关注51Testing

联系我们

快捷面板 站点地图 联系我们 广告服务 关于我们 站长统计 发展历程

法律顾问:上海兰迪律师事务所 项棋律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2024
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪ICP备05003035号

沪公网安备 31010102002173号