限制你的Python程序所能使用的内存

开发 后端
如果程序开发不当,可能会出现占用过多内存的情况。特别是在Docker里面,如果Python程序占用太多内存,可能会导致Docker容器死掉。

 [[376039]]

如果程序开发不当,可能会出现占用过多内存的情况。特别是在Docker里面,如果Python程序占用太多内存,可能会导致Docker容器死掉。

为了限制Python程序所能使用的最大内存,我们可以使用Python自带的resource模块。

首先获取系统默认的内存soft上限和hard上限:

  1. import resource 
  2. soft, hard = resource.getrlimit(resource.RLIMIT_AS) 

其中的resource.RLIMIT_AS实际上就是数字5,表示内存资源。而soft限制是一个可以调节的内存使用上限,hard是一个一旦设定就很难动态调整的内存使用量上限。

在我的电脑上运行效果如下图所示:

一开始soft和hard的值是一样的。并且它们的单位不是比特。而是比比特还小的单位。我的电脑是8GB内存,而8 * 1024 ^ 6 正好约等于这里的hard和soft的值。

接下来,设置当前运行的这个Python程序能够使用的最大内存:

  1. resource.setrlimit(resource.RLIMIT_AS, (最大上限, hard)) 

其中最大上限是一个整数。假设我想限制当前程序最多可以使用500MB的内存,那么这里的最大上限可以设置为:

  1. 0.5 * 1024 ^ 6 = 576460752303423488 

所以设置为:

  1. resource.setrlimit(resource.RLIMIT_AS, (576460752303423488, hard)) 

那么当前Python程序使用的内存超过500MB以后,程序就会抛出MemoryError。

最后,这些代码只能在Linux系统上正常工作。Windows和Mac上可能会有问题。

本文转载自微信公众号「未闻Code」,可以通过以下二维码关注。转载本文请联系未闻Code公众号。

 

责任编辑:武晓燕 来源: 未闻Code
相关推荐

2021-01-14 22:23:16

Python开发内存

2021-03-29 09:10:23

Python内存inux

2012-10-10 10:13:22

数据结构

2012-10-18 10:40:46

数据结构

2012-10-08 15:59:38

数据结构

2012-10-08 14:52:56

数据结构

2012-10-10 10:30:18

数据结构

2012-10-09 10:09:19

数据结构

2020-02-09 17:23:17

Python数据字典

2020-06-17 14:10:01

Python内存程序

2024-08-07 08:40:46

2010-11-08 10:07:23

SQL Server内

2020-06-23 09:48:09

Python开发内存

2024-08-02 14:52:00

2009-12-01 11:19:02

路由器IP限制

2022-09-21 18:06:10

Python内存管理

2010-02-23 13:58:22

Python性能

2020-07-23 14:15:42

Cython的Python代码

2021-04-27 06:44:03

PythonCython编程语言

2009-07-14 16:16:04

JDBC update
点赞
收藏

51CTO技术栈公众号