32位和64位平台上的Python数据结构的内存大小有没有参考?
如果没有,这将是一件很好的事情。越详尽越好!那么,下面的Python结构使用了多少字节(取决于相关的len
和内容类型)?
int
float
str
tuple
list
dict
set
array.array
numpy.array
deque
(对于只保留对其他对象的引用的容器,我们显然不想计算项目本身的大小,因为它可能是共享的。)
此外,有没有办法在运行时(递归或非递归)获取对象所使用的内存?
发布于 2009-08-25 23:13:48
an earlier question对此的建议是使用sys.getsizeof(),引用:
>>> import sys
>>> x = 2
>>> sys.getsizeof(x)
14
>>> sys.getsizeof(sys.getsizeof)
32
>>> sys.getsizeof('this')
38
>>> sys.getsizeof('this also')
48
您可以采用这种方法:
>>> import sys
>>> import decimal
>>>
>>> d = {
... "int": 0,
... "float": 0.0,
... "dict": dict(),
... "set": set(),
... "tuple": tuple(),
... "list": list(),
... "str": "a",
... "unicode": u"a",
... "decimal": decimal.Decimal(0),
... "object": object(),
... }
>>> for k, v in sorted(d.iteritems()):
... print k, sys.getsizeof(v)
...
decimal 40
dict 140
float 16
int 12
list 36
object 8
set 116
str 25
tuple 28
unicode 28
2012-09-30
python 2.7 (linux,32位):
decimal 36
dict 136
float 16
int 12
list 32
object 8
set 112
str 22
tuple 24
unicode 32
python 3.3 (linux,32位)
decimal 52
dict 144
float 16
int 14
list 32
object 8
set 112
str 26
tuple 24
unicode 26
2016-08-01
OSX,Python 2.7.10 (默认,Oct 23 2015,19:19:21)在darwin上,GCC 4.2.1兼容Apple LLVM 7.0.0 (clang-700.0.59.5)
decimal 80
dict 280
float 24
int 24
list 72
object 16
set 232
str 38
tuple 56
unicode 52
发布于 2016-11-30 13:26:15
这些答案都收集了浅层次的信息。我怀疑这个问题的访问者最终会在这里回答这个问题,“这个复杂的对象在内存中有多大?”
这里有一个很好的答案:https://goshippo.com/blog/measure-real-size-any-python-object/
笑点是:
import sys
def get_size(obj, seen=None):
"""Recursively finds size of objects"""
size = sys.getsizeof(obj)
if seen is None:
seen = set()
obj_id = id(obj)
if obj_id in seen:
return 0
# Important mark as seen *before* entering recursion to gracefully handle
# self-referential objects
seen.add(obj_id)
if isinstance(obj, dict):
size += sum([get_size(v, seen) for v in obj.values()])
size += sum([get_size(k, seen) for k in obj.keys()])
elif hasattr(obj, '__dict__'):
size += get_size(obj.__dict__, seen)
elif hasattr(obj, '__iter__') and not isinstance(obj, (str, bytes, bytearray)):
size += sum([get_size(i, seen) for i in obj])
return size
如下所示:
In [1]: get_size(1)
Out[1]: 24
In [2]: get_size([1])
Out[2]: 104
In [3]: get_size([[1]])
Out[3]: 184
如果您想更深入地了解Python的内存模型,这里有一篇很棒的文章,它有一个类似的“总大小”代码片段,作为更长的解释的一部分:https://code.tutsplus.com/tutorials/understand-how-much-memory-your-python-objects-use--cms-25609
发布于 2009-08-26 01:45:10
我一直很高兴地使用pympler来完成这些任务。它与许多版本的Python兼容--特别是asizeof
模块回到了2.2版本!
例如,使用hughdbrown的示例,但开头是from pympler import asizeof
,结尾是print asizeof.asizeof(v)
,我看到( MacOSX 10.5上的system Python2.5):
$ python pymp.py
set 120
unicode 32
tuple 32
int 16
decimal 152
float 16
list 40
object 0
dict 144
str 32
显然,这里有一些近似值,但我发现它对于内存占用分析和调优非常有用。
https://stackoverflow.com/questions/1331471
复制相似问题