Python line_profilerコード例
Pythonの line_profiler を実行して、 この質問 の回答に示されている形式で行ごとの実行時間を取得する方法を理解しようとしています。
モジュールをインストールし、そのLineProfilerオブジェクトを以下のように呼び出していますが、取得する出力は1回だけであり、行ごとの要約ではありません。
何か案は？さらに、関数の外にあるnumbers = [random.randint(1,100) for i in range(1000)]行の時間を取得するにはどうすればよいですか？
from line_profiler import LineProfiler
import random
def do_stuff(numbers):
s = sum(numbers)
l = [numbers[i]/43 for i in range(len(numbers))]
m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
numbers = [random.randint(1,100) for i in range(1000)]
profile = LineProfiler(do_stuff(numbers))
profile.print_stats()
[] Timer unit: 3.20721e-07 s
line_profilerテストケース（ GitHub にあります）には、Pythonスクリプト内からプロファイルデータを生成する方法の例があります。関数をラップする必要がありますプロファイルを作成してからラッパーを呼び出し、必要な関数の引数を渡します。
from line_profiler import LineProfiler
import random
def do_stuff(numbers):
s = sum(numbers)
l = [numbers[i]/43 for i in range(len(numbers))]
m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()
出力：
Timer unit: 1e-06 s
Total time: 0.000649 s
File: <ipython-input-2-2e060b054fea>
Function: do_stuff at line 4
Line # Hits Time Per Hit % Time Line Contents
==============================================================
4 def do_stuff(numbers):
5 1 10 10.0 1.5 s = sum(numbers)
6 1 186 186.0 28.7 l = [numbers[i]/43 for i in range(len(numbers))]
7 1 453 453.0 69.8 m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
プロファイルへの関数の追加
また、プロファイリングする関数を追加することもできます。たとえば、2番目のcalled関数があり、calling関数のみをラップした場合、プロファイルの結果のみが表示されます。 calling関数から。
from line_profiler import LineProfiler
import random
def do_other_stuff(numbers):
s = sum(numbers)
def do_stuff(numbers):
do_other_stuff(numbers)
l = [numbers[i]/43 for i in range(len(numbers))]
m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()
上記は、calling関数に対して次のプロファイル出力のみを生成します。
Timer unit: 1e-06 s
Total time: 0.000773 s
File: <ipython-input-3-ec0394d0a501>
Function: do_stuff at line 7
Line # Hits Time Per Hit % Time Line Contents
==============================================================
7 def do_stuff(numbers):
8 1 11 11.0 1.4 do_other_stuff(numbers)
9 1 236 236.0 30.5 l = [numbers[i]/43 for i in range(len(numbers))]
10 1 526 526.0 68.0 m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
この場合、次のようにプロファイルに追加のcalled関数を追加できます。
from line_profiler import LineProfiler
import random
def do_other_stuff(numbers):
s = sum(numbers)
def do_stuff(numbers):
do_other_stuff(numbers)
l = [numbers[i]/43 for i in range(len(numbers))]
m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp.add_function(do_other_stuff) # add additional function to profile
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()
出力：
Timer unit: 1e-06 s
Total time: 9e-06 s
File: <ipython-input-4-dae73707787c>
Function: do_other_stuff at line 4
Line # Hits Time Per Hit % Time Line Contents
==============================================================
4 def do_other_stuff(numbers):
5 1 9 9.0 100.0 s = sum(numbers)
Total time: 0.000694 s
File: <ipython-input-4-dae73707787c>
Function: do_stuff at line 7
Line # Hits Time Per Hit % Time Line Contents
==============================================================
7 def do_stuff(numbers):
8 1 12 12.0 1.7 do_other_stuff(numbers)
9 1 208 208.0 30.0 l = [numbers[i]/43 for i in range(len(numbers))]
10 1 474 474.0 68.3 m = ['hello'+str(numbers[i]) for i in range(len(numbers))]
注：この方法でプロファイルに関数を追加する場合、プロファイルコードを変更する必要はありません（つまり、@profileデコレータを追加する必要はありません）。
ドキュメント で説明されているように：
スクリプトでは、プロファイルする関数を@profileで装飾できます。
do_stuff関数を@profileで装飾してから、実行します。
kernprof.py -v -l script_to_profile.py
注釈付きの出力を端末に出力します。プロファイルもscript_to_profile.py.lprofに書き込まれ、後で出力を再作成できます。
python -m line_profiler script_to_profile.py.lprof