我的python程序在k8s pod上运行。该程序从db读取熊猫数据中的数据&执行一些数据转换操作。在其中一个操作中，数据大小呈指数增长，从而导致内存错误。因为它是熊猫，所有的数据都保存在记忆中。为了避免这种情况，如果内存消耗超过阈值，则需要将数据写入磁盘。要做到这一点，我需要知道python程序中当前的pod内存利用率，这样，当阈值达到90%时，我就开始将数据转储到磁盘&释放内存。基本上，我需要了解python程序中
浏览 13提问于2021-11-23得票数 2
回答已采纳
但是当我长时间测试(发送请求)时，Dashboard的内存使用量继续增加。下面是一个示例代码。Hello World'
app.run(host='0.0.0.0', port=80, debug=True)以下是内存使用情况的图像：
浏览 0提问于2019-06-04得票数 11
我曾经在32位操作系统上运行32位python，每当我不小心将值追加到无限列表中的数组中，或者试图加载太大的文件时，python就会因为内存不足错误而停止。然而，我现在在64位操作系统上使用64位python，而不是给出异常，python会耗尽最后一位内存，并导致我的计算机冻结，因此我被迫重新启动它。我看了看堆栈溢出，似乎没有一个好的方法来控制内存使用或限制内存使用。例如，这个解决方案：限制了python</
浏览 2提问于2013-12-15得票数 8
2回答
我做了大量的统计工作，并使用Python作为我的主要语言。我使用的一些数据集可以占用20 of的内存，这使得在numpy、scipy和PyIMSL中使用内存中的函数几乎是不可能的。统计分析语言SAS在这里有一个很大的优势，因为它可以对来自硬盘的数据进行操作，而不是严格地在内存中进行处理。但是，我希望避免使用SAS编写大量代码(出于各种原因)，因此我试图确定使用Python (除了购买更多的硬件和内存)有哪些选项。最近，我开始使用，并认为这是我所找到的最佳选择，可以允许<
浏览 3提问于2011-02-02得票数 46
回答已采纳
2回答
我的内存限制是4GB内存。perform next operation在创建c ++时，内存使用量激增，python被杀死。我是在EC2 Ubuntu上用4GB内存和单核执行这一操作。当我在我的MAC上执行同样的计算时，它可以很容易地完成，而不会有任何内存问题，而且所花费的时间也会更少。为什么会发生这种情况？
浏览 4提问于2014-08-02得票数 0
回答已采纳
有没有什么python/Shell脚本可以让内存使用率达到100%，持续20分钟。操作系统Linux。Python版本2.7
浏览 0提问于2017-07-03得票数 0
1回答
我正在寻找一种方法来获取新分配的python对象的内存大小，以监视代码块的内存使用情况。例如，对于时间监控，我们通常使用以下代码# ... long operation有什么方法可以用内存(在Python3获取新对象分配内存的大小(与内存空闲操作无关)。我找到了一个很好的解决方案，但是它不支持Python3
浏览 6提问于2022-08-21得票数 0
4回答
在我看来，Python将整个3 GB的文件加载到内存中，我无法摆脱它。我正在使用Ubuntu，并且我已经在终端中使用了“系统监视器”和“空闲”命令来监控内存使用情况。编辑:我试图在清除字典后强制执行gc.collect()，但无济于事。EDIT2 :我在Ubuntu12.04上运行Python2.7
浏览 0提问于2012-09-14得票数 17
1回答
我正在尝试运行一个Python (PySpark应用程序)，它占用了太多内存，而我的应用程序因为超出内存限制而被扼杀了(为了能够产生更多的工作人员，我试图降低内存使用率)。我来自Java/Scala，所以Python的工作方式与我头脑中的JVM类似.
有没有办法告诉Python它有多少“可用内存”？我是说，当你的堆大小几乎满的时候。我想在Python上执行同样的操作，这样that就不会因为当内存是垃圾时使用
浏览 1提问于2017-08-05得票数 1
回答已采纳
1回答
我有一个django leak服务器运行在uwsgi下面，它似乎会泄漏内存。比较python堆/对象内存和进程RSS：：的Pympler
浏览 7提问于2013-01-09得票数 10
3回答
相反，我的问题是关于这个问题本身：
当Python退出时，从Python模块的全局命名空间引用的对象并不总是被释放。如果有循环引用，则可能发生这种情况。还有一些由C库分配的内存是不可能释放的(例如，像Purify这样的工具会抱怨这些)。然而，Python对于在退出时清理内存很有侵略性，并且确实试图销毁每个对象。如果您想要强制Python删除取消分配中的某些内容，请使用模块来运行强制删除
浏览 5提问于2018-04-12得票数 6
2回答
我需要控制当前python进程的内存使用情况。这个进程是一个多线程的python RPC服务器。我计划通过延迟调用内存密集型函数来控制这个进程的内存使用量，如果线程发现当前内存使用量超过阈值的话。1)如何获取当前进程的内存大小？由于我将更频繁地执行此<
浏览 1提问于2015-07-09得票数 1
在C#中，值类型(例如: int、float等)存储在堆栈中。方法参数也可以存储在堆栈中。然而，大多数其他内容都存储在堆中。这包括列表、对象等。
浏览 0提问于2010-03-01得票数 17
回答已采纳
1回答
当我将文件加载到json中时，pythons的内存使用量会达到1.8 get左右，而我似乎无法释放这些内存。运行上述两行代码后，我使用了前面提到的1.8 in内存。如果我这样做了，del j内存使用率根本不会下降。如果我用gc.collect()跟在后面，它仍然不会掉下来。我正在尝试运行一些内存分析，但是heapy已经在100%的CPU上运行了大约一个小时，并且还没有产生任何输出。
有谁有什么想法吗？我也尝试过使用cjson而不是打包的json模块。cjson使用的内存减少了约30%，但
浏览 1提问于2012-06-16得票数 9
回答已采纳
我需要一些在内存和临时文件中使用文件操作的示例。我查看了Django文档/示例，但还不太清楚，所以我需要首先用Python理解这些操作是如何工作的，而不仅仅是复制和粘贴操作。我知道如何使用ImageFields，上传默认操作，我只对使用“内存</
浏览 10提问于2017-08-24得票数 9
回答已采纳
1回答
我的操作系统是windows 64，我有32 64内存。但是，python无法使用内存，我得到了“内存错误”，有没有办法为Python分配更多的内存以避免此错误？谢谢
浏览 6提问于2013-12-23得票数 2
回答已采纳
我认为在pyspark中，python代码运行在python进程中，这些进程不使用pyspark创建的JVM的内存堆。所以,
如果我使用pyspark提供的函数，我处理的是JVM内存堆( spark.executor.memory)If和spark.driver.memory，我使用python本机函数)，那么我处理python进程内存堆(spark.driver.memoryOverhead和spark.executor.memoryOverhead)If，我有一个D
浏览 1提问于2022-01-13得票数 0
我在Python中保留了两个不同变量的值，以知道它们的内存地址通过使用id()函数也是相同的，当然，这两个变量的内存地址是相同的，但是我在C++中执行了相同的过程，所以我使用(&)操作符得到了两个不同的内存地址，所以我必须知道在C++内部还是在Python内部的内存地址。
浏览 5提问于2022-06-21得票数 -3
2回答
我正在尝试修改python程序，以便能够使用共享内存与C++程序通信。python程序的主要职责是从共享内存中的输入队列中读取一些视频帧，对视频帧执行一些操作，并将其写回共享内存中的输出队列。我相信我几乎没有什么需要去实现的，如果有人能给我一些启示，那就太好了：
共享内存：在C/C++中，您可以使用shmget和shmat等函数来获取指向共享内存的指针。在python中处理此问题的等效方法是什么，以便python
浏览 5提问于2018-03-05得票数 15
回答已采纳
3回答
我正在使用Linux操作系统运行python程序，我想知道这个进程总共使用了多少内存。有没有办法确定总内存使用量？
浏览 0提问于2016-12-03得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
