通过Python的__slots__节省9GB内存
admin
2023-07-31 01:51:57
0

我们之前提到过,Oyster.com基于Python的web服务器缓存了大量Python字典(dicts)(哈希表(hash tables))的静态内容。好啦,我们最近使用一行代码——在我们的Image类中使用__slots__,使得每个6GB的服务器在处理中都节省超过2GB内存。

这是使用前和使用这一改变后再部署的RAM用量截图:

我们大概分配了一百万个下面这个类的实例:

pythonclass Image(object):
    def __init__(self, id, caption, url):
        self.id = id
        self.caption = caption
        self.url = url
        self._setup()

    # ... other methods ...

Python默认使用一个字典来存储一个对象的实例属性。一般说来,这很不错,而且还支持完全动态性,比如在运行时设置任意新的属性。

然而,对于一个“小类”来说,有一些在“编译时”就已经固定的属性,这样一来,字典实际上是在消耗内存,在创建一百万个这样的类的时候,消耗更是显而易见。你可以跟Python说不使用字典,而是仅为某些固定的属性分配空间,可以通过在类中将__slots__设置为一个固定列表来实现这个效果:

pythonclass Image(object):
    __slots__ = [\'id\', \'caption\', \'url\']

    def __init__(self, id, caption, url):
        self.id = id
        self.caption = caption
        self.url = url
        self._setup()

    # ... other methods ...

需要特别说到的是,你也可以使用 collections.namedtuple,它仅限定元组空间(the space of a tuple)中的属性能够访问,这与在类中使用__slots__相似。但是,在我看来,从一个命名元组(namedtuple)类中继承令人感到怪异。并且,如果你想自定义初始化器(initializer),你还必须重写__new__而不是用__init__

警告:别过早优化或者将此应用在所有场景!这个方法并不利于代码维护,而且在你真的有成千个实例的时候才有显著效果。

来自:Saving 9 GB of RAM with Python’s __slots__

相关内容

热门资讯

500 行 Python 代码... 语法分析器描述了一个句子的语法结构,用来帮助其他的应用进行推理。自然语言引入了很多意外的歧义,以我们...
定时清理删除C:\Progra... C:\Program Files (x86)下面很多scoped_dir开头的文件夹 写个批处理 定...
65536是2的几次方 计算2... 65536是2的16次方:65536=2⁶ 65536是256的2次方:65536=256 6553...
Mobi、epub格式电子书如... 在wps里全局设置里有一个文件关联,打开,勾选电子书文件选项就可以了。
scoped_dir32_70... 一台虚拟机C盘总是莫名奇妙的空间用完,导致很多软件没法再运行。经过仔细检查发现是C:\Program...
pycparser 是一个用... `pycparser` 是一个用 Python 编写的 C 语言解析器。它可以用来解析 C 代码并构...
小程序支付时提示:appid和... [Q]小程序支付时提示:appid和mch_id不匹配 [A]小程序和微信支付没有进行关联,访问“小...
微信小程序使用slider实现... 众所周知哈,微信小程序里面的音频播放是没有进度条的,但最近有个项目呢,客户要求音频要有进度条控制,所...
python绘图库Matplo... 本文简单介绍了Python绘图库Matplotlib的安装,简介如下: matplotlib是pyt...
Prometheus+Graf... 一,Prometheus概述 1,什么是Prometheus?Prometheus是最初在Sound...