如何离线分析使用 pstats.dump_stats(filename) 创建的文件？

Question

我基本上做了以下事情：

import cProfile, pstats, StringIO
pr = cProfile.Profile()
pr.enable()
# ... my code did something ...
pr.disable()
s = StringIO.StringIO()
sortby = 'cumulative'
ps = pstats.Stats(pr, stream=s).sort_stats(sortby)

ps.dump_stats('stats.dmp')  # dump the stats to a file named stats.dmp

所以现在我离线存储了名为 'stats.dmp' 的文件。

我如何使用 pstats 分析此文件以供人类使用？

提前致谢。

Answer 1

这是我发现的内容和我生成的 Python 程序。我使用在 linux 上制作并在 windows xp 上分析的 .dmp 文件对此进行了测试。它工作得很好。 Python 文件名为 "analyze_dmp.py".

#!/usr/local/bin/python2.7
# -*- coding: UTF-8 -*-
"""analyze_dmp.py takes the file INFILEPATH [a pstats dump file] Producing OUTFILEPATH [a human readable python profile]
Usage:   analyze_dmp.py INFILEPATH  OUTFILEPATH
Example: analyze_dmp.py stats.dmp   stats.log
"""
# --------------------------------------------------------------------------
# Copyright (c) 2019 Joe Dorocak  (joeCodeswell at gmail dot com)
# Distributed under the MIT/X11 software license, see the accompanying
# file license.txt or http://www.opensource.org/licenses/mit-license.php.
# --------------------------------------------------------------------------
# I added the above License by request here are my research links
#    https://meta.stackexchange.com/q/18883/311363
#    https://meta.stackexchange.com/q/128840/311363
#    https://codereview.stackexchange.com/q/10746

import sys, os
import cProfile, pstats, StringIO

def analyze_dmp(myinfilepath='stats.dmp', myoutfilepath='stats.log'):
    out_stream = open(myoutfilepath, 'w')
    ps = pstats.Stats(myinfilepath, stream=out_stream)
    sortby = 'cumulative'

    ps.strip_dirs().sort_stats(sortby).print_stats(.3)  # plink around with this to get the results you need

NUM_ARGS = 2
def main():
    args = sys.argv[1:]
    if len(args) != NUM_ARGS or "-h" in args or "--help" in args:
        print __doc__
        s = raw_input('hit return to quit')
        sys.exit(2)
    analyze_dmp(myinfilepath=args[0], myoutfilepath=args[1])

if __name__ == '__main__':
    main()

Answer 2

你可以试试snakevizhttps://jiffyclub.github.io/snakeviz

它是一个基于浏览器的图形查看器，用于 Python 的 cProfile 模块的输出，是使用标准库 pstats 模块的替代方法。

# to install it with pip
pip install snakeviz

# once installed, you can use snakeviz to view the file
snakeviz /path/to/your/dump/pstat/file

这是您可以像上面那样转储的可视化 pstat 文件的示例图像。

Answer 3

你可以预先使用kcachegrind if you convert your pstats file with pyprof2calltree:

$ pyprof2calltree -i /path/to/your/dump/pstat/file -o /tmp/converted_stats
$ kcachegrind /tmp/converted_stats

如果您使用的是基于 Debian 的系统，您可以通过运行:

轻松安装这两个工具

$ sudo apt install pyprof2calltree kcachegrind

另见相关主题：Using cProfile results with KCacheGrind

如何离线分析使用 pstats.dump_stats(filename) 创建的文件？

How can I analyze a file created with pstats.dump_stats(filename) off line?

python

profiling

analysis

pstats