芹菜 - 减少内存消耗 - 腾讯云开发者社区

文章/答案/技术大牛

发布

4回答

芹菜-减少内存消耗

python、django、profiling、memory-management、celery

我们有大约300个进程在Ubuntu 10.4 64位下运行，空闲时每个进程占用~19 of，~174 of，因此，对于所有进程来说，空闲内存大约为6GB。问题是--我们怎样才能降低RAM的容量--至少对于闲散的工人来说，一些芹菜或蟒蛇的选择可能会有所帮助。如何确定哪一部分占用了大部分内存？ UPD:是航班搜索代理，一个机构/日期的一名工作人员。

浏览 5提问于2010-12-03得票数 14

2回答

如何减少芹菜的内存消耗？

ubuntu、python、django

我在一个具有613 to内存的微ec2实例上使用芹菜2.5.1和django，因此必须降低内存消耗。1071 wuser 10 0.0 578M 2384 62m 10.6 python manage_prod.py celeryd --beat 偶尔运行

浏览 0提问于2012-04-06得票数 3

1回答

我们如何分析每个芹菜任务的内存使用情况？

python、celery、pytest、memory-profiling

我使用pytest运行测试，而pytest又运行几个芹菜任务。但是，当我使用我无法跟踪在celery worker中运行的每个celery任务所消耗的内存。我可以看到py.test进程消耗了50MB的内存(我可以在mprof图中看到)，而芹菜工人消耗了大约600-700MB的内存，mprof图中没有反映出来。如何绘制由py.test触发的每个芹菜</em

浏览 5提问于2020-05-21得票数 1

1回答

Django应用程序的典型内存使用情况

python、django、memory-management、celery

我在一个Ubuntu服务器上部署了一个Django应用程序(DEBUG=False)，我看到持枪和芹菜进程占用了很高的内存。我在试着理解，这种记忆消耗正常吗？对于空闲系统，我应该期望的典型内存用法是什么？关于python中的内存泄漏有一些，但是对于空闲系统来说，这可能不是一个大问题。

浏览 3提问于2015-01-29得票数 13

1回答

芹菜-内存泄漏(内存没有释放，即使在工人完成任务后)

python、django、celery

我在芹菜服务器上运行了一个原子事务，它消耗了大量的内存，但是在任务完成后内存无法释放。对我有效的解决方案是在N项任务后杀死芹菜工人，即使用- CELERYD_MAX_TASKS_PER_CHILD.。这个问题还有别的解决办法吗？如果芹菜每天收到大约10,000个任务，那么应该为CELERYD_MAX_TASKS_PER_CHILD，设置什么好的数量？

浏览 1提问于2019-10-11得票数 6

回答已采纳

1回答

芹菜消耗整个内存

python、celery

我有一个关于芹菜的问题。我只是用太多的任务数据尝试它，它不适合我的记忆。结果是芹菜被杀死了，因为它使用了整个系统内存。

浏览 0提问于2014-05-29得票数 0

2回答

减少内存消耗

c++、opencv

imshow("webcam", images[framenumb]); //We can then process the captured frames 但是，它会导致内存不足错误

浏览 0提问于2016-11-10得票数 0

1回答

减少内存消耗

c++、ffmpeg、rtsp

当ip摄像机的分辨率很低时，一切都进行得很好，但是当它们增加时，我的程序的内存消耗就会突然上升。我已经意识到，ffmpeg存储了一系列的帧，我们可以寻求。1.有没有办法减少这方面的影响？3.或任何其他帮助我减少内存使用的方法

浏览 1提问于2019-07-17得票数 0

5回答

如何创建芹菜窗口服务？

python、windows、windows-services、celery

我正在尝试创建一个Windows服务来启动芹菜。我读到过一篇使用实现的文章。然而，它似乎启动了大量的芹菜实例，并一直在消耗内存，直到机器死掉。有没有办法将其作为Windows服务启动？

浏览 3提问于2012-02-21得票数 12

回答已采纳

1回答

在ArangoDB中减少内存消耗的方法

performance、memory-management、arangodb

我们目前有一个运行在3.0.10版本上的ArangoDB集群，用于POC，大约81 GB存储在磁盘上，主内存消耗大约98 GB分布在5个主DB服务器上。大约有2亿个顶点和3.5亿条边。有3个边缘集合和3个文档集合，大部分内存(80%)由于边缘的存在而被消耗我正在探索减少主内存消耗的方法。我想知道是否有任何方法可以压缩/序列化数据，从而减少主存的使用量。减少内存的原因是为了减少基础设施成本

浏览 0提问于2016-11-03得票数 3

2回答

芹菜工艺体系结构与妖魔化的正确途径

django、celery、uwsgi、django-celery、supervisord

版本：芹菜有10个Direct类型的队列(例如queue1，queue2，我注意到的另一件事是，uwsgi还用concurrency=2生成了一些芹菜工人(还不知道如何和为什么)。因此，如果我有4个uwsgi进程运行，我将增加10个芹菜工人正在运行。所有这些工人每个人都需要200到300米的内存？这里出了点问题，我感觉到了，但我不能把手指放在上面。芹菜<

浏览 2提问于2017-03-09得票数 3

1回答

气流芹菜工人如果感应器数大于并发量会被阻塞吗？

celery、deadlock、airflow

比方说，我将芹菜并发设置为n，但是我在一个dag中有m(m>n) ExternalTaskSensor，它将检查另一个名为do_sth的进程，这些ExternalTaskSensor将消耗所有芹菜工人，但是我不能将并发设置得太高(比如2*m)，因为dag do_sth可能会启动太多的进程，从而导致内存不足。我搞不懂我应该设置多少芹菜并发？

浏览 2提问于2017-02-28得票数 9

回答已采纳

1回答

在Rabbitmq和芹菜中设置true

rabbitmq、celery、django-celery

我正在使用芹菜和兔子my，但是由于在队列中推了几个任务，我的服务器内存利用率超过了40%，这样兔子就不会再接受任何任务了。所以我想删除那些已经被执行的消息，但是由于rabbitmq的持久行为，这些消息不会自动删除，所以我想设置一些配置，比如autoAck=True，这样如果消息是从芹菜中消耗的，它就会从rabbitmq队列和我的服务器内存中删除

浏览 2提问于2018-01-30得票数 1

1回答

指针-减少内存消耗

java、pointers、memory、lwjgl、minecraft

我一直在为OpenGL实践编写一个副本(我猜也有很多)，但是在编写了基本的呈现API之后，我注意到真正的“我的世界”使用的是一个批量或内存--大约800 do！static IceBlock Ice = new IceBlock();对于100个块世界，当前内存使用量约为

浏览 2提问于2013-06-17得票数 2

回答已采纳

1回答

在我的Django celery worker实例上遇到内存错误

django、redis、celery、celerybeat

我正在使用django芹菜和redis (经纪人)。我在我的一个worker实例上观察到以下错误。searching for neighbors我只想确认一下，这个内存错误要么是由于我代码中某处的内存泄漏

浏览 5提问于2020-12-27得票数 1

1回答

SAP HANA表分区

memory、sap、partitioning、hana、slt

在表分区(Hash by partition 4)之后，观察到磁盘上内存的总内存消耗增加了。之前我们做了分区(Hash by partition 12)，观察到磁盘上内存的总内存消耗减少了。这两个表都是SLT表，并且在恢复slt复制之前获取内存转储。内存增加或减少的原因是什么?有人能解释吗？

浏览 6提问于2020-03-27得票数 0

1回答

jQAssistant -减少内存消耗

java、nexus、jqassistant

我试图用jQAssistant (使用scan -u maven:repository:...)扫描这个存储库，但对于Java1.7来说，即使是4 4GB的堆内存也不够，几个小时后就出现了内存不足的错误有没有办法减少内存消耗，比如分块扫描存储库？或者我可以将jQAssistant配置为使用更少的内存吗？

浏览 6提问于2016-07-14得票数 1

9回答

为什么ARC没有在popViewController之后释放内存

ios、memory-management、memory-leaks、uinavigationcontroller

我在跟踪我的应用程序的内存消耗。在推动新的viewController时，内存消耗正在逐渐增加，但是当我使用[self.navigationController popViewControllerAnimated:NO];弹出相同的ViewController时，内存消耗不是减少而是常数。这个特定的viewController可以被用户多次推送和弹出，从而导致内存中应用程序的高内存消耗。我应该做什么来优化我的<em

浏览 9提问于2014-01-28得票数 43

1回答

IPhone watchdog和malloc

iphone、memory-management、malloc

我的应用程序使用了相当多的内存，因此它经常被看门狗杀死。为了减少内存消耗(还改变了其他一些东西)，我重写了一些系统函数(准确地说，替换了几个CoreText类)。这实际上进行得很好，我已经设法减少了大约3MB的内存消耗(根据分配和内存监控仪器)。我认为这可能是由于过度使用malloc/

浏览 4提问于2010-08-19得票数 0

1回答

如何用UIImage加载16位图像？

objective-c、ios、uiimage

我要优化我的应用程序的内存使用。我的应用程序有许多带有图形的UI，它们占用了大量的设备内存。是否无论像素格式是16位还是32位，UIImage都使用每像素8位来存储图像？或者我可以做些什么来减少16位图像的内存消耗？？

浏览 1提问于2012-03-02得票数 1

点击加载更多