在這篇文章中,我將討論一個(gè)工具,用以分析Python中CPU使用情況。CPU分析是通過(guò)分析CPU執(zhí)行代碼的方式來(lái)測(cè)量代碼的性能,以此找到代碼中的不妥之處,然后處理它們。接下來(lái)我們將看看如何跟蹤Python腳本使用時(shí)CPU使用情況,重點(diǎn)關(guān)注以下幾個(gè)方面:1、cProfile2、line_profiler3、pprofile4、vprof
測(cè)量CPU使用率對(duì)于這篇文章,我將主要使用與內(nèi)存分析中使用腳本相同的腳本,具體如下:
另外,請(qǐng)記住,在PyPy2中,您需要使用與之配合的pip版本:
并且其他依賴項(xiàng)也將被安裝:
cProfile在討論CPU分析時(shí),最常用的工具之一是cProfile,主要是因?yàn)樗鼉?nèi)置在CPython2和PyPy2中。這是一個(gè)確定性的分析器,意味著在運(yùn)行程序時(shí)會(huì)收集一組統(tǒng)計(jì)數(shù)據(jù),例如我們代碼的各個(gè)部分的執(zhí)行次數(shù)或執(zhí)行時(shí)間。此外,cProfile在系統(tǒng)上的開(kāi)銷(xiāo)比其他內(nèi)置的分析器(配置文件)要低。CPython2的用法很簡(jiǎn)單:
如果您使用PyPy2:
其輸出如下:
即使使用這個(gè)文本輸出,很容易看到我們的腳本多次調(diào)用了list.append方法。如果我們使用gprof2dot,我們可以以圖形的方式看到cProfile輸出。要使用它,我們必須首先安裝graphviz,之后是一些依賴包,最后在Ubuntu上使用如下命令:
再次運(yùn)行腳本:
我們得到以下output.png文件:
這樣更容易看到一切。我們來(lái)仔細(xì)看看它的輸出。您可以看到腳本中的函數(shù)調(diào)用如下:1、第一行:Python文件名,行號(hào)和方法名稱(chēng)2、第二行:代碼塊占用全部時(shí)間的百分比3、第三行:括號(hào)中,方法本身占全部時(shí)間的百分比4、第四行:調(diào)用函數(shù)的次數(shù)例如,在頂部的第三個(gè)紅色方塊中,方法primes占用了98.28%的時(shí)間,其中65.44%的內(nèi)容在其中進(jìn)行,調(diào)用了40次。其余的時(shí)間花在Python中的list.append(22.33%)和range(11.51%)中。作為一個(gè)簡(jiǎn)單的腳本,我們只需要重寫(xiě)我們的腳本,具體的如下所示:
如果我們使用CPython2測(cè)量我們腳本的時(shí)間,
還有PyPy2:
我們通過(guò)使用PyPy2的CPython2和3.1X獲得了不錯(cuò)的效果,下面是cProfile的調(diào)用流程圖:
您還可以以編程方式使用cProfile,例如:
這在某些情況下很有用,例如多進(jìn)程性能測(cè)量
line_profiler此分析器在行級(jí)提供關(guān)于工作負(fù)載的信息。它使用Cython在C中實(shí)現(xiàn),并將其與cProfile進(jìn)行比較時(shí)發(fā)現(xiàn)其具有較小的開(kāi)銷(xiāo)。源代碼可以在這里找到,也可以在這里找到PyPI頁(yè)面。與cProfile相比,它具有一樣的開(kāi)銷(xiāo),不過(guò)卻要花費(fèi)12倍的時(shí)間來(lái)獲取配置文件。要使用它,您需要先通過(guò)pip添加它:pip install pip install Cython ipython == 5.4.1 line_profiler(CPython2)。這個(gè)分析器的一個(gè)主要缺點(diǎn)是它不支持PyPy。就像使用memory_profiler一樣,您需要在要分析的函數(shù)中添加一個(gè)裝飾器。在我們的例子中,您需要在03.primes-v1.py中定義我們的primes函數(shù)之前添加@profile。然后調(diào)用它:
你將得到如下輸出:
我們看到,重復(fù)調(diào)用list.append的兩個(gè)循環(huán)花了最多的時(shí)間。
pprofile根據(jù)作者說(shuō)明,pprofile是一個(gè)“線程測(cè)量和統(tǒng)計(jì)的純python分析器”。它受到line_profiler的啟發(fā),修復(fù)了很多缺點(diǎn),但是由于它完全用Python編寫(xiě),所以它也可以與PyPy成功使用。與cProfile相比,使用CPython時(shí)的分析時(shí)間要多28倍,而使用PyPy時(shí),分析時(shí)間要多10倍,而且細(xì)節(jié)水平更加細(xì)化。我們也支持PyPy!除此之外,它支持剖析線程,這在各種情況下可能會(huì)很方便。要使用它,您需要先通過(guò)pip添加它:pip install pprofile(CPython2)/ pypy -m pip install pprofile(PyPy),然后調(diào)用它:
輸出與我們以前看到的不同,我們得到如下結(jié)果:
我們現(xiàn)在可以更詳細(xì)地看到一切。讓我們來(lái)看看輸出。您可以獲得腳本的整個(gè)輸出,并且在每行之前,您可以看到對(duì)其進(jìn)行的調(diào)用次數(shù),運(yùn)行時(shí)間(秒),每次調(diào)用的時(shí)間和全局時(shí)間的百分比,pprofile為我們的輸出添加了額外的行(如第44和50行,以(call)開(kāi)頭)與累積指標(biāo)。再次,我們看到,重復(fù)調(diào)用list.append的兩個(gè)循環(huán)花了我們腳本中最多的時(shí)間。
vprofvprof是一個(gè)Python分析器,為各種Python程序特性(如運(yùn)行時(shí)間和內(nèi)存使用)提供豐富的交互式可視化。它是一個(gè)基于Node.JS的圖形化的顯示在網(wǎng)頁(yè)中的結(jié)果。使用它,您可以看到與Python腳本相關(guān)的以下一個(gè)或全部:1、CPU使用圖2、代碼分析3、內(nèi)存圖4、代碼熱圖要使用它,您需要先通過(guò)pip添加它:pip install vprof(CPython2)/ pypy -m pip install vprof(PyPy),然后調(diào)用它:在CPython2上,顯示代碼散熱圖(第一個(gè)調(diào)用如下)和代碼分析(下面的第二個(gè)調(diào)用):
在PyPy上,顯示代碼散熱圖(第一個(gè)調(diào)用如下)和代碼分析(下面的第二個(gè)調(diào)用):
在每種情況下,您將看到代碼散點(diǎn)圖的以下內(nèi)容
以及代碼分析的以下內(nèi)容。
結(jié)果以圖形方式看到,我們可以懸停鼠標(biāo)或單擊每行以獲取更多信息。再次,我們看到,重復(fù)調(diào)用list.append的兩個(gè)循環(huán)花了我們腳本中最多的時(shí)間。
-
cpu
+關(guān)注
關(guān)注
68文章
10909瀏覽量
213139 -
python
+關(guān)注
關(guān)注
56文章
4809瀏覽量
85070
原文標(biāo)題:Python腳本分析CPU使用情況
文章出處:【微信號(hào):magedu-Linux,微信公眾號(hào):馬哥Linux運(yùn)維】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
CUBEIDE運(yùn)行完可以看RAM的使用情況,運(yùn)行中可以實(shí)時(shí)查看RAM的使用情況嗎?
樹(shù)莓派能不能加個(gè)可以根據(jù)CPU使用情況變風(fēng)速的風(fēng)扇?
如何查看RAM使用情況?
ucosiii堆棧使用情況檢測(cè)使用率100%?
電池使用情況統(tǒng)計(jì)信息
如何知道CPU利用率和內(nèi)存使用情況?
如何檢查imx6中的GPU使用情況?
SoC如何查看內(nèi)存使用情況
單片機(jī)整體的CPU使用情況詳細(xì)介紹
![單片機(jī)整體的<b class='flag-5'>CPU</b><b class='flag-5'>使用情況</b>詳細(xì)介紹](https://file.elecfans.com/web1/M00/D1/3F/pIYBAF--FiGAYa7BAAHAqabhgK0988.png)
Windows查看電源使用情況
![Windows查看電源<b class='flag-5'>使用情況</b>](https://file.elecfans.com/web1/M00/D9/4E/pIYBAF_1ac2Ac0EEAABDkS1IP1s689.png)
評(píng)論