以下为例子,判断计算机内存并释放程序内存。

# coding=utf8
import time
import psutil, gc, commands,os from logger_until import LoggerUntil
from until import keep_circulating logger = LoggerUntil(name="Monitor").getlog(logfilename='Monitor.log', loglevel=2, add_StreamHandler=1) need_monitor_procces_names = [ ##需要检测的进程的cmd命令放到这里,支持模糊匹配
'touna0627.py',
'dailiip.py',
'redis-server',
'mongod',
] class Monitor(object):
def __init__(self):
self.specified_process_list = self.get_specified_process()
self.current_process = self.get_current_process() @staticmethod
def print_all_cmdlines():
for pid in psutil.pids():
p = psutil.Process(pid)
print p.cmdline() @staticmethod
def get_specified_process():
all_pids = psutil.pids()
process_list = []
for pid in all_pids:
p = psutil.Process(pid)
p_cmdline = p.cmdline()
for argx in p_cmdline:
for name in need_monitor_procces_names:
if argx.find(name) > -1:
if p.status() != 'stopped':
process_list.append(p) p_pid_set = set()
process_list2 = []
for p in process_list:
if p.pid not in p_pid_set:
process_list2.append(p)
p_pid_set.add(p.pid)
return process_list2 @staticmethod
def monitor_system():
psutil.cpu_percent()
time.sleep(1)
mem = psutil.virtual_memory() mem_total = mem.total / 1000000
mem_available = mem.available / 1000000
mem_percent_str = str(mem.percent) + '%' cpu_count = psutil.cpu_count()
cpu_percent_str = str(psutil.cpu_percent()) + '%' msg = '本机总内存是:{0}M , 本机可用内存是:{1}M, 本机内存使用率是:{2}, 本机cpu核数是:{3}, 本机cpu使用率是:{4}\n\n'.format(mem_total, mem_available, mem_percent_str, cpu_count, cpu_percent_str)
logger.info(msg) def monitor_specified_process(self):
for p in self.specified_process_list:
p.cpu_percent(None)
time.sleep(1)
for p in self.specified_process_list:
# p = psutil.Process(0)
""":type :psutil.Process"""
cmdline_str = ' '.join(p.cmdline()).ljust(60, ' ')
p_cpu_percent_str = str(round(p.cpu_percent(), 2)) + '%'
p_memory_percent_str = str(round(p.memory_percent(), 2)) + '%'
p_strated_time = time.strftime('%Y-%m-%d %H:%M:%S', time.localtime(p.create_time()))
p_pid_str = str(p.pid) msg = '进程' + cmdline_str + ' 的pid是:' + p_pid_str + ' cpu使用率是:' + p_cpu_percent_str + ' 内存使用率是:' + p_memory_percent_str \
+ ' 进程的启动时间是:' + p_strated_time
logger.info(msg) @staticmethod
def get_current_process():
return psutil.Process() def is_need_release(self,threshold):
print self.current_process.memory_percent()
if self.current_process.memory_percent() < threshold:
return 0
else:
logger.info('回收当前 %s 进程id的内存' % self.current_process.pid)
return 1 def free_current_process_memory(self, threshold):
"""回收python所处的当前进程的内存"""
if self.is_need_release(threshold) == 1:
gc.collect() class MemoryReleaser():
def __init__(self,threshold,cmd_name_str='touna0627.py'):
"""
:type threshold:float
"""
self.threshold = threshold # 内存使用率的阈值
self.cmd_name_str =cmd_name_str
self.stutus, self.output = self.__get_memory_available() def __get_memory_available(self):
# status, output = commands.getstatusoutput("free -m | grep Mem | awk '{print $4}'") ##shell命令查询计算机可用内存
status, output = commands.getstatusoutput("ps aux | grep %s | sort -k4,4nr|head -1| awk '{print $4}'"%(self.cmd_name_str)) ##shell命令查询程序的内存使用率
return status, output def release_memory(self):
if float(self.output) > self.threshold:
logger.info('程序的内存使用率是 {}% ,程序需要释放内存'.format(self.output))
gc.collect() @keep_circulating(10)
def monitoring():
MemoryReleaser(40).release_memory() ###这一行来释放内存
monitor = Monitor()
monitor.monitor_specified_process()
monitor.monitor_system() if __name__ == "__main__":
pass
a = list(range(10000000))
del a
time.sleep(30)
monitoring()

如果把MemoryReleaser(600).release_memory() 注释掉,程序将一直是占用大内存。

程序中使用了

free -m | grep Mem | awk  '{print $7}'
来判断计算机可用内存。 虽然psutil可以判断内存,但使用psutil判断内存,内存就无法回收了。 把MemoryReleaser(600).release_memory() 放到monitoring函数中的最后一行,那就回收不了内存了。 尝试了很多次使用
 if psutil.Process().memory_percent() > 0: 
  gc.collect()

这种方式不能回收内存。
写成if true是可以回收内存的。

python垃圾回收,判断内存占用,手动回收内存,二的更多相关文章

  1. linux下使用free命令查看实际内存占用(可用内存)

    转:http://blog.is36.com/linux_free_command_for_memory/ linux下在终端环境下可以使用free命令看到系统实际使用内存的情况,一般用free -m ...

  2. C&C++动态分配内存(手动分配内存)三种方式

    1. malloc函数 函数原型:void *malloc(unsigned int size)函数的作用是:在内训的动态存储区开辟一个size个字节的连续空间,返回所分配区域的首字节地址. 可以看到 ...

  3. python 垃圾回收笔记

    目录 引用计数 python内部的引用计数机制 循环引用 调试内存泄漏 总结 python 程序在运行的时候,需要在内存中开辟出一块空间,用于存放运行时产生的临时变量:计算完成后,再将结果输出到永久性 ...

  4. linux内存源码分析 - 内存回收(整体流程)

    本文为原创,转载请注明:http://www.cnblogs.com/tolimit/ 概述 当linux系统内存压力就大时,就会对系统的每个压力大的zone进程内存回收,内存回收主要是针对匿名页和文 ...

  5. (转)linux内存源码分析 - 内存回收(整体流程)

    http://www.cnblogs.com/tolimit/p/5435068.html------------linux内存源码分析 - 内存回收(整体流程) 概述 当linux系统内存压力就大时 ...

  6. Windbg分析高内存占用问题

    1. 问题简介 最近产品发布大版本补丁更新,一商超客户升级后,反馈系统经常奔溃,导致超市的收银系统无法正常收银,现场排队付款的顾客更是抱怨声声.为了缓解现场的情况, 客户都是手动回收IIS应用程序池才 ...

  7. Egret在Chrome浏览器中的内存占用(内存泄露)

    参考: 怎样查看Chrome的内存占用情况 JS内存泄漏排查方法(Chrome Profiles) chrome内存泄露(一).内存泄漏分析工具 chrome内存泄露(二).内存泄漏实例 目录: 一 ...

  8. Linux使用free命令查看实际内存占用

    转自:http://www.cnblogs.com/pengdonglin137/p/3315124.html Linux下在终端环境下可以使用free命令看到系统实际使用内存的情况,一般用free ...

  9. Sciter/HTMLayout内存占用评测

    先从最基础的Exe文件的执行说起: Exe文件要在系统中执行,首先要将Exe文件本身加载入内存中,并且通常在内存中加载完成的Exe所占空间大小会比实际所占的磁盘空间大一些,这是由内存的特殊设定所决定的 ...

随机推荐

  1. Android keytool 生成keystore与给APK签名

    http://www.tttabc.com/android/keytool-keystore-jarsigner-apk.htm

  2. JAVA ZIP 处理文件

    压缩文件 public static void main(String[] args) throws IOException { String filePath = "E:\\技术部员工工作 ...

  3. IT系统

      去年11月11日,也就是我们俗称的“双十一”当天,淘宝集市.淘宝商城天猫联手创造了交易额达191亿的销售神话.然而,即便是这种神话也还不足以成为留传至今的佳话,其中最为重要的原因就是支撑电子商务的 ...

  4. Web服务端开发需要考虑的问题

    API设计 是否Restful. 首先需要清楚,Restful是一种风格而不是规范,不存在必须遵守的问题. Restful本质上是对HTTP API进行有效的分类. 分类是应该的,可以让API组织变得 ...

  5. 【转】为什么说 Java 程序员必须掌握 Spring Boot ?

    Spring Boot 2.0 的推出又激起了一阵学习 Spring Boot 热,那么, Spring Boot 诞生的背景是什么?Spring 企业又是基于什么样的考虑创建 Spring Boot ...

  6. Sword protobuf学习二

    编写protobuf消息文件 文件格式: xxx.proto //标明使用哪个版本的protobuf,默认2.0版本 syntax = "proto3"; //类似于c++中的na ...

  7. 关于Unity中的旋涡特效的制作(捕鱼达人3技术)(专题八)

    Mesh--材质--Shader 1: Mesh 是网格,包括顶点,法线,纹理坐标,切线,三角形.在每一个3D模型节点里面,有一个Mesh Filter组件来提取模型里面的网格数据;2: Shader ...

  8. Axiom3D写游戏:用Overlay实现Mesh浏览.

    从网上找了些资源,大多搜Ogre,Mesh资源,然后为了方便查看各个Mesh,以及对应骨骼动画.为了实用性,考虑放在原游戏窗口里实现.最开始打算窗口新建viewport来实现,后发现这种方式的局限性, ...

  9. git patch 使用

    使用git的时候,需要删除几个id,会对到之前的代码,但又想保留现在的代码,以便后面从新合并,所以就将现在的代码打包成patch,留到下次合并. 参考链接 http://www.jianshu.com ...

  10. SpringMVC系列(二): SpringMVC各个注解的使用

    1.@RequestMapping 1.@RequestMapping除了能修饰方法,还能修饰类(1)修饰类:提供初步的请求映射信息,相对于web请求的根目录(2)修饰方法:提供进一步的细分映射信息相 ...