python性能分析
admin
2023-07-31 00:47:10
0

调优简介

什么是性能分析

没有优化过的程序通常会在某些子程序(subroutine)上消耗大部分的CPU指令周期(CPU cycle)。性能分析就是分析代码和它正在使用的资源之间有着怎样的关系。例如,性能分析可以告诉你一个指令占用了多少CPU时间,或者整个程序消耗了多少内存。性能分析是通过使用一种被称为性能分析器(profiler)的工具,对程序或者二进制可执行文件(如果可以拿到)的源代码进行调整来完成的。

性能分析软件有两类方法论:基于事件的性能分析(event-based profiling)和统计式性能分析(statistical profiling)。

支持这类基于事件的性能分析的编程语言主要有以下几种。

  • Java:JVMTI(JVM Tools Interface,JVM工具接口)为性能分析器提供了钩子,可以跟踪诸如函数调用、线程相关的事件、类加载之类的事件。
  • .NET:和Java一样,.NET运行时提供了事件跟踪功能(https://en.wikibooks.org/wiki/Intro-duction_to_Software_Engineering/Testing/Profiling#Methods_of_data_gathering)。
  • Python: 开发者可以用 sys.setprofile 函数,跟踪 python_[call|return|exception]或 c_[call|return|exception] 之类的事件。

基于事件的性能分析器(event-based profiler,也称为轨迹性能分析器,tracing profiler)是通过收集程序执行过程中的具体事件进行工作的。这些性能分析器会产生大量的数据。基本上,它们需要监听的事件越多,产生的数据量就越大。这导致它们不太实用,在开始对程序进行性能分析时也不是首选。但是,当其他性能分析方法不够用或者不够精确时,它们可以作为最后的选择。

Python基于事件的性能分析器的简单示例代码

123456789101112131415161718192021222324 import sys def profiler(frame, event, arg):    print \’PROFILER: %r %r\’ % (event, arg)    sys.setprofile(profiler) #simple (and very ineficient) example of how to calculate the Fibonacci sequence for a number.def fib(n):    if n == 0:        return 0    elif n == 1:        return 1    else:        return fib(n1) + fib(n2)    def fib_seq(n):    seq = [ ]    if n > 0:        seq.extend(fib_seq(n1))    seq.append(fib(n))    return seq print fib_seq(2)

执行结果:

12345678910111213141516171819202122232425262728293031323334353637 $ python test.py PROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’return\’ 0PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7f67a0>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7f67a0>PROFILER: \’return\’ [0]PROFILER: \’c_call\’ <builtin method extend of list object at 0x7f113d7e0d40>PROFILER: \’c_return\’ <builtin method extend of list object at 0x7f113d7e0d40>PROFILER: \’call\’ NonePROFILER: \’return\’ 1PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7e0d40>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7e0d40>PROFILER: \’return\’ [0, 1]PROFILER: \’c_call\’ <builtin method extend of list object at 0x7f113d7e0758>PROFILER: \’c_return\’ <builtin method extend of list object at 0x7f113d7e0758>PROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’return\’ 1PROFILER: \’call\’ NonePROFILER: \’return\’ 0PROFILER: \’return\’ 1PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7e0758>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7e0758>PROFILER: \’return\’ [0, 1,>PROFILER: \’return\’ [0, 1,\’能分析是通过使用一种被称为性能分析器(profiler)的工具,对程序或者二进制可执行文件(如果可以拿到)的源代码进行调整来完成的。

性能分析软件有两类方法论:基于事件的性能分析(event-based profiling)和统计式性能分析(statistical profiling)。

支持这类基于事件的性能分析的编程语言主要有以下几种。

  • Java:JVMTI(JVM Tools Interface,JVM工具接口)为性能分析器提供了钩子,可以跟踪诸如函数调用、线程相关的事件、类加载之类的事件。
  • .NET:和Java一样,.NET运行时提供了事件跟踪功能(https://en.wikibooks.org/wiki/Intro-duction_to_Software_Engineering/Testing/Profiling#Methods_of_data_gathering)。
  • Python: 开发者可以用 sys.setprofile 函数,跟踪 python_[call|return|exception]或 c_[call|return|exception] 之类的事件。

基于事件的性能分析器(event-based profiler,也称为轨迹性能分析器,tracing profiler)是通过收集程序执行过程中的具体事件进行工作的。这些性能分析器会产生大量的数据。基本上,它们需要监听的事件越多,产生的数据量就越大。这导致它们不太实用,在开始对程序进行性能分析时也不是首选。但是,当其他性能分析方法不够用或者不够精确时,它们可以作为最后的选择。

Python基于事件的性能分析器的简单示例代码

123456789101112131415161718192021222324 import sys def profiler(frame, event, arg):    print \’PROFILER: %r %r\’ % (event, arg)    sys.setprofile(profiler) #simple (and very ineficient) example of how to calculate the Fibonacci sequence for a number.def fib(n):    if n == 0:        return 0    elif n == 1:        return 1    else:        return fib(n1) + fib(n2)    def fib_seq(n):    seq = [ ]    if n > 0:        seq.extend(fib_seq(n1))    seq.append(fib(n))    return seq print fib_seq(2)

执行结果:

12345678910111213141516171819202122232425262728293031323334353637 $ python test.py PROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’return\’ 0PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7f67a0>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7f67a0>PROFILER: \’return\’ [0]PROFILER: \’c_call\’ <builtin method extend of list object at 0x7f113d7e0d40>PROFILER: \’c_return\’ <builtin method extend of list object at 0x7f113d7e0d40>PROFILER: \’call\’ NonePROFILER: \’return\’ 1PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7e0d40>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7e0d40>PROFILER: \’return\’ [0, 1]PROFILER: \’c_call\’ <builtin method extend of list object at 0x7f113d7e0758>PROFILER: \’c_return\’ <builtin method extend of list object at 0x7f113d7e0758>PROFILER: \’call\’ NonePROFILER: \’call\’ NonePROFILER: \’return\’ 1PROFILER: \’call\’ NonePROFILER: \’return\’ 0PROFILER: \’return\’ 1PROFILER: \’c_call\’ <builtin method append of list object at 0x7f113d7e0758>PROFILER: \’c_return\’ <builtin method append of list object at 0x7f113d7e0758>PROFILER:

相关内容

热门资讯

Mobi、epub格式电子书如... 在wps里全局设置里有一个文件关联,打开,勾选电子书文件选项就可以了。
500 行 Python 代码... 语法分析器描述了一个句子的语法结构,用来帮助其他的应用进行推理。自然语言引入了很多意外的歧义,以我们...
定时清理删除C:\Progra... C:\Program Files (x86)下面很多scoped_dir开头的文件夹 写个批处理 定...
scoped_dir32_70... 一台虚拟机C盘总是莫名奇妙的空间用完,导致很多软件没法再运行。经过仔细检查发现是C:\Program...
65536是2的几次方 计算2... 65536是2的16次方:65536=2⁶ 65536是256的2次方:65536=256 6553...
小程序支付时提示:appid和... [Q]小程序支付时提示:appid和mch_id不匹配 [A]小程序和微信支付没有进行关联,访问“小...
pycparser 是一个用... `pycparser` 是一个用 Python 编写的 C 语言解析器。它可以用来解析 C 代码并构...
微信小程序使用slider实现... 众所周知哈,微信小程序里面的音频播放是没有进度条的,但最近有个项目呢,客户要求音频要有进度条控制,所...
Apache Doris 2.... 亲爱的社区小伙伴们,我们很高兴地向大家宣布,Apache Doris 2.0.0 版本已于...
python清除字符串里非数字... 本文实例讲述了python清除字符串里非数字字符的方法。分享给大家供大家参考。具体如下: impor...