Pythonで現在のCPUとRAMの使用量を取得する方法は?
質問
Pythonで現在のシステムステータス(現在のCPU、RAM、空きディスク容量など)を取得するための望ましい方法は何ですか? * nixおよびWindowsプラットフォームのボーナスポイント。
検索からそれを抽出するいくつかの可能な方法があるようです:
-
PSI などのライブラリの使用(現在、積極的に開発されておらず、複数のプラットフォーム)または pystatgrab のようなもの(2007年以降もアクティビティがなく、Windowsをサポートしていないようです)。
-
プラットフォーム固有のコードの使用(
os.popen(" ps")
などの* nixシステムおよびの
( ActiveStateのこのレシピを参照)。 Pythonクラスをこれらすべてのコードスニペットと組み合わせることもできます。MEMORYSTATUS
の使用) Windowsプラットフォーム用のctypes.windll.kernel32
これらの方法が悪いというわけではありませんが、同じことを行うための十分にサポートされたマルチプラットフォームの方法がすでにありますか?
解決
psutilライブラリは、さまざまなシステム情報(CPU /メモリ使用量)を提供しますプラットフォームの:
psutilは、Pythonを使用して、実行中のプロセスとシステム使用率(CPU、メモリ)に関する情報をポータブルな方法で取得するためのインターフェイスを提供するモジュールです。ps、top、Windowsタスクマネージャーなどのツールが提供する多くの機能を実装します。
現在、Linux、Windows、OSX、Sun Solaris、FreeBSD、OpenBSD、およびNetBSDの32ビットおよび64ビットアーキテクチャをサポートし、Pythonバージョン2.6から3.5(Python 2.4および2.5のユーザーは2.1.3を使用できます)バージョン)。
更新: psutil
の使用例は次のとおりです。
#!/usr/bin/env python
import psutil
# gives a single float value
psutil.cpu_percent()
# gives an object with many fields
psutil.virtual_memory()
# you can convert that object to a dictionary
dict(psutil.virtual_memory()._asdict())
他のヒント
psutilライブラリを使用します。 Ubuntu 18.04では、pipは2019年1月30日の時点で5.5.0(最新バージョン)をインストールしました。古いバージョンの動作は多少異なる場合があります。 Pythonでこれを行うことにより、psutilのバージョンを確認できます。
from __future__ import print_function # for Python2
import psutil
print(psutil.__version__)
メモリとCPUの統計情報を取得するには:
from __future__ import print_function
import psutil
print(psutil.cpu_percent())
print(psutil.virtual_memory()) # physical memory usage
print('memory % used:', psutil.virtual_memory()[2])
virtual_memory
(タプル)には、システム全体で使用されるメモリの割合が含まれます。これは、Ubuntu 18.04では数パーセント過大評価されているように見えました。
現在のPythonインスタンスが使用しているメモリを取得することもできます:
import os
import psutil
pid = os.getpid()
py = psutil.Process(pid)
memoryUse = py.memory_info()[0]/2.**30 # memory use in GB...I think
print('memory use:', memoryUse)
Pythonスクリプトの現在のメモリ使用量を示します。
psutilのpypiページには、さらに詳細な例があります。
Linuxのみ: stdlib依存関係のみのRAM使用量用の1ライナー:
import os
tot_m, used_m, free_m = map(int, os.popen('free -t -m').readlines()[-1].split()[1:])
編集:指定されたソリューションOSの依存関係
コードの下で、外部ライブラリなしで機能しました。 Python 2.7.9でテストしました
CPU使用率
import os
CPU_Pct=str(round(float(os.popen('''grep 'cpu ' /proc/stat | awk '{usage=($2+$4)*100/($2+$4+$5)} END {print usage }' ''').readline()),2))
#print results
print("CPU Usage = " + CPU_Pct)
およびRamの使用量、合計、使用済み、無料
import os
mem=str(os.popen('free -t -m').readlines())
"""
Get a whole line of memory output, it will be something like below
[' total used free shared buffers cached\n',
'Mem: 925 591 334 14 30 355\n',
'-/+ buffers/cache: 205 719\n',
'Swap: 99 0 99\n',
'Total: 1025 591 434\n']
So, we need total memory, usage and free memory.
We should find the index of capital T which is unique at this string
"""
T_ind=mem.index('T')
"""
Than, we can recreate the string with this information. After T we have,
"Total: " which has 14 characters, so we can start from index of T +14
and last 4 characters are also not necessary.
We can create a new sub-string using this information
"""
mem_G=mem[T_ind+14:-4]
"""
The result will be like
1025 603 422
we need to find first index of the first space, and we can start our substring
from from 0 to this index number, this will give us the string of total memory
"""
S1_ind=mem_G.index(' ')
mem_T=mem_G[0:S1_ind]
"""
Similarly we will create a new sub-string, which will start at the second value.
The resulting string will be like
603 422
Again, we should find the index of first space and than the
take the Used Memory and Free memory.
"""
mem_G1=mem_G[S1_ind+8:]
S2_ind=mem_G1.index(' ')
mem_U=mem_G1[0:S2_ind]
mem_F=mem_G1[S2_ind+8:]
print 'Summary = ' + mem_G
print 'Total Memory = ' + mem_T +' MB'
print 'Used Memory = ' + mem_U +' MB'
print 'Free Memory = ' + mem_F +' MB'
これは私が少し前にまとめたもので、ウィンドウズのみですが、必要なことの一部を得るのに役立つかもしれません。
由来: " for sys available mem" http://msdn2.microsoft.com/en-us/library/aa455130.aspx
"個々のプロセス情報とPythonスクリプトの例" http://www.microsoft.com/technet/scriptcenter/scripts /default.mspx?mfr=true
注:WMIインターフェイス/プロセスは、同様のタスクを実行するためにも利用可能です 現在の方法は私のニーズをカバーしているため、ここでは使用していませんが、いつかこれを拡張または改善する必要がある場合は、WMIツールを有効に調査することをお勧めします。
PythonのWMI:
http://tgolden.sc.sabren.com/python/wmi.html
コード:
'''
Monitor window processes
derived from:
>for sys available mem
http://msdn2.microsoft.com/en-us/library/aa455130.aspx
> individual process information and python script examples
http://www.microsoft.com/technet/scriptcenter/scripts/default.mspx?mfr=true
NOTE: the WMI interface/process is also available for performing similar tasks
I'm not using it here because the current method covers my needs, but if someday it's needed
to extend or improve this module, then may want to investigate the WMI tools available.
WMI for python:
http://tgolden.sc.sabren.com/python/wmi.html
'''
__revision__ = 3
import win32com.client
from ctypes import *
from ctypes.wintypes import *
import pythoncom
import pywintypes
import datetime
class MEMORYSTATUS(Structure):
_fields_ = [
('dwLength', DWORD),
('dwMemoryLoad', DWORD),
('dwTotalPhys', DWORD),
('dwAvailPhys', DWORD),
('dwTotalPageFile', DWORD),
('dwAvailPageFile', DWORD),
('dwTotalVirtual', DWORD),
('dwAvailVirtual', DWORD),
]
def winmem():
x = MEMORYSTATUS() # create the structure
windll.kernel32.GlobalMemoryStatus(byref(x)) # from cytypes.wintypes
return x
class process_stats:
'''process_stats is able to provide counters of (all?) the items available in perfmon.
Refer to the self.supported_types keys for the currently supported 'Performance Objects'
To add logging support for other data you can derive the necessary data from perfmon:
---------
perfmon can be run from windows 'run' menu by entering 'perfmon' and enter.
Clicking on the '+' will open the 'add counters' menu,
From the 'Add Counters' dialog, the 'Performance object' is the self.support_types key.
--> Where spaces are removed and symbols are entered as text (Ex. # == Number, % == Percent)
For the items you wish to log add the proper attribute name in the list in the self.supported_types dictionary,
keyed by the 'Performance Object' name as mentioned above.
---------
NOTE: The 'NETFramework_NETCLRMemory' key does not seem to log dotnet 2.0 properly.
Initially the python implementation was derived from:
http://www.microsoft.com/technet/scriptcenter/scripts/default.mspx?mfr=true
'''
def __init__(self,process_name_list=[],perf_object_list=[],filter_list=[]):
'''process_names_list == the list of all processes to log (if empty log all)
perf_object_list == list of process counters to log
filter_list == list of text to filter
print_results == boolean, output to stdout
'''
pythoncom.CoInitialize() # Needed when run by the same process in a thread
self.process_name_list = process_name_list
self.perf_object_list = perf_object_list
self.filter_list = filter_list
self.win32_perf_base = 'Win32_PerfFormattedData_'
# Define new datatypes here!
self.supported_types = {
'NETFramework_NETCLRMemory': [
'Name',
'NumberTotalCommittedBytes',
'NumberTotalReservedBytes',
'NumberInducedGC',
'NumberGen0Collections',
'NumberGen1Collections',
'NumberGen2Collections',
'PromotedMemoryFromGen0',
'PromotedMemoryFromGen1',
'PercentTimeInGC',
'LargeObjectHeapSize'
],
'PerfProc_Process': [
'Name',
'PrivateBytes',
'ElapsedTime',
'IDProcess',# pid
'Caption',
'CreatingProcessID',
'Description',
'IODataBytesPersec',
'IODataOperationsPersec',
'IOOtherBytesPersec',
'IOOtherOperationsPersec',
'IOReadBytesPersec',
'IOReadOperationsPersec',
'IOWriteBytesPersec',
'IOWriteOperationsPersec'
]
}
def get_pid_stats(self, pid):
this_proc_dict = {}
pythoncom.CoInitialize() # Needed when run by the same process in a thread
if not self.perf_object_list:
perf_object_list = self.supported_types.keys()
for counter_type in perf_object_list:
strComputer = "."
objWMIService = win32com.client.Dispatch("WbemScripting.SWbemLocator")
objSWbemServices = objWMIService.ConnectServer(strComputer,"root\cimv2")
query_str = '''Select * from %s%s''' % (self.win32_perf_base,counter_type)
colItems = objSWbemServices.ExecQuery(query_str) # "Select * from Win32_PerfFormattedData_PerfProc_Process")# changed from Win32_Thread
if len(colItems) > 0:
for objItem in colItems:
if hasattr(objItem, 'IDProcess') and pid == objItem.IDProcess:
for attribute in self.supported_types[counter_type]:
eval_str = 'objItem.%s' % (attribute)
this_proc_dict[attribute] = eval(eval_str)
this_proc_dict['TimeStamp'] = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S.') + str(datetime.datetime.now().microsecond)[:3]
break
return this_proc_dict
def get_stats(self):
'''
Show process stats for all processes in given list, if none given return all processes
If filter list is defined return only the items that match or contained in the list
Returns a list of result dictionaries
'''
pythoncom.CoInitialize() # Needed when run by the same process in a thread
proc_results_list = []
if not self.perf_object_list:
perf_object_list = self.supported_types.keys()
for counter_type in perf_object_list:
strComputer = "."
objWMIService = win32com.client.Dispatch("WbemScripting.SWbemLocator")
objSWbemServices = objWMIService.ConnectServer(strComputer,"root\cimv2")
query_str = '''Select * from %s%s''' % (self.win32_perf_base,counter_type)
colItems = objSWbemServices.ExecQuery(query_str) # "Select * from Win32_PerfFormattedData_PerfProc_Process")# changed from Win32_Thread
try:
if len(colItems) > 0:
for objItem in colItems:
found_flag = False
this_proc_dict = {}
if not self.process_name_list:
found_flag = True
else:
# Check if process name is in the process name list, allow print if it is
for proc_name in self.process_name_list:
obj_name = objItem.Name
if proc_name.lower() in obj_name.lower(): # will log if contains name
found_flag = True
break
if found_flag:
for attribute in self.supported_types[counter_type]:
eval_str = 'objItem.%s' % (attribute)
this_proc_dict[attribute] = eval(eval_str)
this_proc_dict['TimeStamp'] = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S.') + str(datetime.datetime.now().microsecond)[:3]
proc_results_list.append(this_proc_dict)
except pywintypes.com_error, err_msg:
# Ignore and continue (proc_mem_logger calls this function once per second)
continue
return proc_results_list
def get_sys_stats():
''' Returns a dictionary of the system stats'''
pythoncom.CoInitialize() # Needed when run by the same process in a thread
x = winmem()
sys_dict = {
'dwAvailPhys': x.dwAvailPhys,
'dwAvailVirtual':x.dwAvailVirtual
}
return sys_dict
if __name__ == '__main__':
# This area used for testing only
sys_dict = get_sys_stats()
stats_processor = process_stats(process_name_list=['process2watch'],perf_object_list=[],filter_list=[])
proc_results = stats_processor.get_stats()
for result_dict in proc_results:
print result_dict
import os
this_pid = os.getpid()
this_proc_results = stats_processor.get_pid_stats(this_pid)
print 'this proc results:'
print this_proc_results
http:// monkut。 webfactional.com/blog/archive/2009/1/21/windows-process-memory-logging-python
" ...現在のシステムステータス(現在のCPU、RAM、空きディスク容量など)" " * nixおよびWindowsプラットフォーム"達成が難しい組み合わせになる可能性があります。
オペレーティングシステムは、これらのリソースを管理する方法が根本的に異なります。実際、システムとしてカウントするものとアプリケーション時間としてカウントするものを定義するなどのコア概念は異なります。
"空きディスク容量&quot ;? 「ディスク容量」とは何ですか?すべてのデバイスのすべてのパーティション?マルチブート環境の外部パーティションはどうですか?
これを可能にする明確なコンセンサスがWindowsと* nixの間にはないと思います。実際、Windowsと呼ばれるさまざまなオペレーティングシステム間でコンセンサスさえ得られない場合があります。 XPとVistaの両方で機能する単一のWindows APIはありますか?
これらの回答はPython 2向けに書かれたものであり、いずれの場合も標準 resource
パッケージはPython 3で利用可能です。これは、特定のプロセス(デフォルトではPythonプロセスの呼び出し)のリソース limits を取得するためのコマンドを提供します。これは、システム全体で現在のリソースの使用量を取得することと同じではありませんが、たとえば"このスクリプトではXのRAMのみを使用するようにしたい。"
CPU使用率に関する次のスクリプト:
import os
def get_cpu_load():
""" Returns a list CPU Loads"""
result = []
cmd = "WMIC CPU GET LoadPercentage "
response = os.popen(cmd + ' 2>&1','r').read().strip().split("\r\n")
for load in response[1:]:
result.append(int(load))
return result
if __name__ == '__main__':
print get_cpu_load()
空きメモリの瞬間的な変動を見つけることができ、 meminfo データソースへのクエリが役立つと感じたため、これに通常の情報ソースを使用することを選択しました。これは、事前に解析された関連パラメーターをさらに取得するのにも役立ちました。
コード
import os
linux_filepath = '/proc/meminfo'
meminfo = dict((i.split()[0].rstrip(':'), int(i.split()[1]))
for i in open(linux_filepath).readlines())
meta['memory_total_gb'] = meminfo['MemTotal'] / (2**20)
meta['memory_free_gb'] = meminfo['MemFree'] / (2**20)
meta['memory_available_gb'] = meminfo['MemAvailable'] / (2**20)
参照用の出力(さらなる分析のためにすべての改行を削除しました)
MemTotal:1014500 kB MemFree:562680 kB MemAvailable:646364 kB バッファ:15144 kBキャッシュ:210720 kB SwapCached:0 kBアクティブ:261476 kB 非アクティブ:128888 kBアクティブ(anon):167092 kB非アクティブ(anon):20888 kB アクティブ(ファイル):94384 kB非アクティブ(ファイル):108000 kB Unevictable:3652 kB Mlocked:3652 kB SwapTotal:0 kB SwapFree:0 kB Dirty:0 kBライトバック: 0 kB AnonPages:168160 kBマップ済み:81352 kB Shmem:21060 kBスラブ:34492 kB SReclaimable:18044 kB SUnreclaim:16448 kB KernelStack:2672 kB ページテーブル:8180 kB NFS_Unstable:0 kBバウンス:0 kB WritebackTmp:0 kB CommitLimit:507248 kB Committed_AS:1038756 kB VmallocTotal: 34359738367 kB VmallocUsed:0 kB VmallocChunk:0 kBハードウェア破損: 0 kB AnonHugePages:88064 kB CmaTotal:0 kB CmaFree:0 kB HugePages_Total:0 HugePages_Free:0 HugePages_Rsvd:0 HugePages_Surp: 0巨大ページサイズ:2048 kB DirectMap4k:43008 kB DirectMap2M:1005568 kB
-
CPUの詳細については、 psutil ライブラリを使用してください
-
RAM周波数(MHz)には、組み込みのLinuxライブラリ dmidecode を使用し、出力を少し操作します;)。このコマンドにはルート権限が必要であるため、パスワードも指定します。次のコマンドをコピーして、 mypass をパスワードに置き換えてください
osをインポート
os.system(" echo mypass | sudo -S dmidecode -t memory | grep 'Clock Speed' | cut -d ':' -f2")
-------------------出力---------------------------
1600 MT / s
不明
1600 MT / s
不明0
- より具体的には
[os.popenのiのi(" echo mypass | sudo -S dmidecode -t memory | grep 'Clock Speed' | cut -d ':' -f2")。read()。split( '' )if i.isdigit()]
--------------------------出力-------------------- -----
['1600'、 '1600']
サブプロセスでpsutilまたはpsmemを使用できます サンプルコード
import subprocess
cmd = subprocess.Popen(['sudo','./ps_mem'],stdout=subprocess.PIPE,stderr=subprocess.PIPE)
out,error = cmd.communicate()
memory = out.splitlines()
リファレンス http:// techarena51.com/index.php/how-to-install-python-3-and-flask-on-linux/
@HrabalのCPU使用コードに基づいて、これが私が使用するものです:
from subprocess import Popen, PIPE
def get_cpu_usage():
''' Get CPU usage on Linux by reading /proc/stat '''
sub = Popen(('grep', 'cpu', '/proc/stat'), stdout=PIPE, stderr=PIPE)
top_vals = [int(val) for val in sub.communicate()[0].split('\n')[0].split[1:5]]
return (top_vals[0] + top_vals[2]) * 100. /(top_vals[0] + top_vals[2] + top_vals[3])
十分にサポートされているマルチプラットフォームライブラリが利用できるとは思わない。 Python自体はCで書かれているので、上記で提案したように、どのOS固有のコードスニペットを実行するかについて、ライブラリは単に賢明な決定を下すだけです。