python 监控某个进程内存的情况问题
作者:一直在测试路上前进 发布时间:2022-12-05 16:55:58
标签:python,监控,进程,内存
python监控某个进程内存
测试场景:
某个客户端程序长时间运行后存在内存泄漏问题,现在开发解决了需要去验证这个问题是否还存在,并要求出具相应测试验证报告。
手段:
需要有一个工具能够实时去获取该程序进程一直运行下占用内存,CPU使用率情况。
方法:
python去实现这么个监控功能
import sys
import time
import psutil
sys.argv
# get pid from args
#获取命令行输入的参数个数,sys.ary是一个列表
#如果列表参数<2,说明只输入了python 文件名称.py,则退出不继续运行
if len(sys.argv) < 2:
print ("没有输入要监控的进程编号")
sys.exit()
#获取进程
print("打印进程号:"+sys.argv[1])
pid = int(sys.argv[1])
p = psutil.Process(pid)
#监控进程并将获取CPU,内存使用情况写入csv文件中
interval = 60 # 获取CPU,内存使用情况轮询时间间隔
num=100
with open("process_monitor_" + p.name() + '_' + str(pid) + ".csv", "a+") as f:
f.write("时间,cpu使用率(%),内存使用率(%),内存使用值MB\n") # csv文件表头列名:time,cpu使用率,内存使用率,内存占用值MB
while num>0:
num=num-1
current_time = time.strftime('%Y%m%d-%H%M%S',time.localtime(time.time()))
cpu_percent = p.cpu_percent() # better set interval second to calculate like: p.cpu_percent(interval=0.5)
mem_percent = p.memory_percent()
mem_info=p.memory_info().rss
mem_MB=4096 / mem_percent
print('当前进程的内存使用:',mem_info)
print('当前进程的内存使用:%.4f MB' %mem_MB)
line = current_time + ',' + str(cpu_percent) + ',' + str(mem_percent)+','+str(mem_MB)
print (line)
f.write(line + "\n")
time.sleep(interval)
python监控进程并重启
最近公司的游戏服务器经常掉线,老板只能让员工不定时登陆服务器看死掉没有,都快成机器人了,因此python自动化监测进程运用脚本就产生了。
分析了具体思路
1.做个线程定时器,每隔20s执行系统命令查询指定进程名称是否存在
2.如果不存在,就重启;不存在就不进行后续的操作。
相关代码很简单
def restart_process(process_name):
red = subprocess.Popen('tasklist', stdout=subprocess.PIPE, stderr=subprocess.PIPE, shell=True)
tasklist_str = red.stdout.read().decode(encoding='gbk')
re_path = process_name.split("\\")[-1]
formattime = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S')
if re_path not in tasklist_str:
# obj = connect_emai()
# sendmail('程序卡掉正在重启。。。', obj)
# 发送HTTP请求
# url = "http://159.138.131.148/server_offline.html"
# request = urllib.request(url)
global count
count += 1
print(formattime + '第' + str(count) + '次检测发现异常重连')
cmd = process_name
os.system(process_name)
# res = subprocess.Popen(cmd,stdout=subprocess.PIPE, stderr=subprocess.PIPE,shell=True)
# print(res.stderr.read().decode(encoding='gbk'),res.stdout.read().decode(encoding='gbk'))
# sendmail('重启连接成功!',obj)
print('yes,connected')
else:
global error_count
error_count += 1
print(formattime + '第' + str(error_count) + '次检测正在运行中')
global timer
timer = Timer(20, restart_process, ("start C:\Progra~1\CloudControlServer\CloudControlServer.exe",))
timer.start()
count = 0
error_count = 0
timer = Timer(20, restart_process, ("start C:\Progra~1\CloudControlServer\CloudControlServer.exe",))
timer.start()
搞定!!!
接下来有了新的需求~~ 需要监控CPU的运行状态,如果CPU一直维持在80%以上 就主动杀死进程,并重启进程,使用了牛逼的psutil 跨系统平台操作库。实现代码如下:
def look_cpu(process_name):
res = subprocess.Popen('wmic cpu get LoadPercentage', stdout=subprocess.PIPE, stderr=subprocess.PIPE, shell=True)
res_str = res.stdout.read().decode(encoding='gbk')
num = re.findall('\d+', res_str)[0]
if int(num) > 80:
print('cup负载超过10%')
time.sleep(10)
res_twice = subprocess.Popen('wmic cpu get LoadPercentage', stdout=subprocess.PIPE, stderr=subprocess.PIPE,
shell=True)
res_twice_str = res_twice.stdout.read().decode(encoding='gbk')
num_twice = re.findall('\d+', res_twice_str)[0]
# 判断两次监测稳定在5%以内 杀死进程并重启
if abs(int(num) - int(num_twice)) < 5:
tasklist = subprocess.Popen('tasklist | findstr CloudControlServer.exe', stdout=subprocess.PIPE,
stderr=subprocess.PIPE, shell=True)
res = tasklist.stdout.read().decode(encoding='gbk')
pid = re.search('\d{1,4}', res).group()
cmd = 'taskkill -f /pid %s' % pid
time.sleep(0.5)
print(cmd)
os.system('taskkill -f /pid %s' % pid)
os.system(process_name)
print('正在监测cpu,cpu占用率:%s' % num)
global timer
timer = Timer(30, look_cpu, ("start C:\Progra~1\CloudControlServer\CloudControlServer.exe",))
timer.start()
但是第三天老板有了新的需求,需要做个web端 将CPU和内存信息开放api 并且支持远程重启,我的思路是利用python自带的http服务类库,省去了socket编程的麻烦,直接输入IP port 即可,这里使用了wsgiref.simple_server
# web服务应用函数
def application(environ, start_response):
path = environ.get('PATH_INFO')
start_response('200 OK', [])
# 提供cpu 状态信息
if path == '/cpu':
res = subprocess.Popen('wmic cpu get LoadPercentage', stdout=subprocess.PIPE, stderr=subprocess.PIPE,
shell=True)
res_str = res.stdout.read().decode(encoding='gbk')
resp = {'cpu': re.findall('\d+', res_str)[0]}
return [json.dumps(resp).encode(encoding='utf-8')]
# 提供cpu + memory 信息
elif path == '/state':
cpu = psutil.cpu_percent()
memory = psutil.virtual_memory()
memory_lv = float(memory.used) / float(memory.total) * 100
res = {'cpu': cpu, 'memory': memory_lv}
return [json.dumps(res).encode(encoding='utf-8')]
# 提供重启进程api
elif path == '/restart_process':
# os.system('shutdowm.exe -r')
res = remote_restart_process("start C:\Progra~1\CloudControlServer\CloudControlServer.exe")
return [b'success']
# 启动web服务器提供api .port=8060
httpserver = make_server('', 8060, application)
httpserver.serve_forever()
'''
三个api接口:
ip:8060/cpu cpu信息
ip:8060/state cpu+memory状态
ip:8060/restart_process 重启进程
'''
来源:https://blog.csdn.net/weixin_43533308/article/details/123929124


猜你喜欢
- 在这篇文章中,将向您展示如何使用Python链接目前主流的MongoDB(V3.4.0)数据库,主要使用PyMongo(v3.4.0)和Mo
- 目录前言1. 使用Lambda来修改Pandas数据框中的值2. 使用f-string来连接字符串3. 用Zip()函数对多个列表进行迭代4
- 最近学习了一下前后端分离技术,前端用的是Vue,后段用的是Flask。vue官网:开源的 Javascript 框架,vue是一套构建用户界
- 流程,通俗来讲,就是许多人,在做一系列的事情时,怎样相互协调,安排好这一系列事情的先后顺序,有什么事先的约定,需要达到怎样的预期目标。在UE
- 如何终止浏览器的 CAHCE 页面?Function Redirect( NewURL ) If&n
- 介绍:pyenv-virtualenv是pyenv的一个插件,作用如同virtualenv一样,是用来管理虚拟环境的,配合pyenv主体使用
- 今天在部署一个实验系统的时候,报出下面这个错: Your 'max_allowed_packet' variable is
- 希望通过本文能够帮助大家顺顺利利通过Python面试,之后还有一篇关于Python Web相关的文章欢迎大家阅读。1、Python中pass
- 以前一直用RHEL 6.3和6.4,系统盘里自带了mysql server,配置好yum源后,直接yum install mysql-ser
- linux环境Mysql 5.7.13安装教程分享给大家,供大家参考,具体内容如下1系统约定安装文件下载目录:/data/softwareM
- 手写数字识别算法的设计与实现本文使用python基于TensorFlow设计手写数字识别算法,并编程实现GUI界面,构建手写数字识别系统。这
- 本文实例讲述了Python自定义scrapy中间模块避免重复采集的方法。分享给大家供大家参考。具体如下:from scrapy import
- 安装环境:CentOS7 64位 MINI版,安装MySQL5.71、配置YUM源在MySQL官网中下载YUM源rpm安装包:http://
- 函数getcache,会自动建立需要的缓存。 代码如下:Function getcache(funsname,isreset,is
- python 中的视频处理模块,有一个叫做 moviepy,今天我们就来唠唠它。模块安装使用如下命令即可pip install moviep
- 本文实例为大家分享了python opencv摄像头应用的具体代码,供大家参考,具体内容如下1、安装下载安装包pip install ope
- 看一看自己写的类是否能符合这样的标准.要成为高手,我要走的路还很长.摘抄自《OOD 启示录》--Arthur J.Riel(1)所有数据都应
- 使用Python解析各种格式的数据都很方便,比如json、txt、xml、csv等。用于处理简单的数据完全足够用了,而且代码简单易懂。前段时
- 本文实例讲述了Python lxml模块的基本使用方法。分享给大家供大家参考,具体如下:1 lxml的安装安装方式:pip install
- USE masterDECLARE @spid intDECLARE CUR CURSORFOR SELECT spid FROM sysp