首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >问答首页 >使用Sidekiq运行的后台作业超出了Heroku上的R14内存配额

使用Sidekiq运行的后台作业超出了Heroku上的R14内存配额
EN

Stack Overflow用户
提问于 2014-03-19 06:09:06
回答 1查看 1K关注 0票数 2

我们正在运行sidekiq工人,他们利用新词来进行批处理操作。

我们的批处理数组在刷新之前最多可容纳400个操作(我们也尝试过较低的数值)。

我们在heroku上遇到了R14内存错误,事情几乎停止了,所以我们怀疑是某种内存泄漏(我已经检查过膨胀了)。然而,我们一直无法弄清楚它在哪里,或者如何防止它。

我们已经尝试使用所有的调试内存gem作为ruby-prof,...在没有任何结果或线索的情况下,通过ObjectSpace读取对象计数,甚至尝试逐行调试,并在没有后台作业的情况下启动进程,但只需通过rails c和以下命令来监视内存使用top -pid `ps auw | grep -i 'rails c' | head -n 1 | awk '{print $2}'` -stats RSIZE

我尝试将ruby版本更新到最新版本(2.1.0),但没有任何更改。

欢迎任何想法帮助我们让我们的员工更快乐!

EN

回答 1

Stack Overflow用户

发布于 2014-03-19 14:27:23

Neo4j在内部使用了大量缓存,这可能会消耗大量内存。您可以尝试通过设置cache_type=none来关闭neo4j的对象缓存,请参阅http://docs.neo4j.org/chunked/stable/configuration-caches.html

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/22497672

复制
相关文章
通过Mono 在 Heroku 上运行 .NET 应用
英文原文:Running .NET on Heroku 中文原文:在 Heroku 上运行 .NET 应用 自从加入了Heroku之后,我就想在这个平台上运行.NET程序。现在我很高兴向大家宣布,我们已经有了一个可用的环境reasonably workable Mono buildpack。我的目标是能够在Windows上使用Visual Studio创建一个ASP.NET MVC解决方案去创建一个Heroku的应用程序。它能够使用git命令push Heroku,构建Heroku,应用部署在Mono和X
张善友
2018/01/29
3.2K0
在Windows上如何后台运行JuiceFS
JuiceFS的Badger引擎改造完成以后,需要在Windows下面进行后台运行。因为现有的JuiceFS中还没有在Windows下的后台运行实现,所以需要通过其他途径解决。
用户1260683
2022/03/30
2.9K0
在Windows上如何后台运行JuiceFS
在 Linux or windows 上后台运行服务
  此时可以访问 http://ip:8000 验证服务是否成功启动了(详细操作见另一篇文章-Python 一行搭建文件服务器)
我是胖虎啊
2022/06/27
3.3K0
在 Linux or windows 上后台运行服务
【译】超硬核|在自制的 CPU 上运行 Rust
作者自制了一个 CPU ,然后用 Rust 实现了软件部分,包括一些简单的程序:绘图器、BASIC/Scheme 语言解释器、Web 服务器、终端模拟器和MIDI 音乐播放器等。本文将涉及许多主题内容,喝一杯,慢慢看。
张汉东
2022/12/08
1.6K0
【译】超硬核|在自制的 CPU 上运行 Rust
在较小内存的机器上运行Elasticsearch与Kibana
因为穷,只买得起1G内存的乞丐配置版的云服务器,但是又想玩玩Elasticsearch+Kibana。而Elasticsearch默认的heap size就是1G,很容易卡死,因此需要手动修改一下配置。
dandelion1990
2019/07/16
5.2K0
使用VirtualBox在后台运行镜像
老高的想做的很简单,就是开一个没有界面的虚拟机运行在后台,由于VirtualBox的GUI和虚拟机的运行管理是分离的,想要做到这一点很容易!
老高的技术博客
2022/12/28
7580
使用VirtualBox在后台运行镜像
Linux上后台保持Terminal交互运行的两种方式
Linux上,如果一个进程需要保持后台运行,尤其是在Linux服务器上,后台运行程序、避免因为SSH连接断开而导致进程停止运行时,该怎么办?
Mintimate
2021/06/21
8.4K0
Linux上后台保持Terminal交互运行的两种方式
Harbor制品仓库资源配额的使用
本文节选自《 Harbor权威指南》 一书第8章,作者为 Harbor 开源项目维护者王岩。
Henry Zhang
2021/04/21
2.7K0
linux使用nohup后台运行shell
例如当前脚本文件是/shell/a.sh 1.当前终端下后台运行 /shell/a.sh & 注:只使用&符号,只是在当前终端下后台运行,当当前终端退出以后,脚本自动停止。 2.退出终端依然在后台运行 nohup /shell/a.sh & nohup 可以实现在退出当前终端以后依然可以在后台持续运行。
93年的老男孩
2019/12/18
3.7K0
带你认识 flask 后台作业
任务进程为后台作业提供了一个便捷的解决方案。Worker过程独立于应用程序运行,甚至可以位于不同的系统上。应用程序和worker之间的通信是通过消息完成的。通过与物理相互作用来监视其进度。下图展示了一个典型的实现:
公众号---人生代码
2019/12/10
2.9K0
带你认识 flask 后台作业
使用内存缓存优化 WordPress 定时作业功能
在 WordPress 中可以定义定时作业,指定定时去执行,那么这些定时作业是存在在哪里呢,怎么运行的呢?
Denis
2023/04/14
3080
Flink TaskManager 内存管理机制介绍与调优总结
作者:董伟柯,腾讯 CSIG 高级工程师 概要 Flink 的新版内存管理机制,要追溯到 2020 年初发布的 Flink 1.10 版本。当时 Flink 社区为了实现三大目标: 流和批模式下内存管理的统一,即同一套内存配置既可用于流作业也可用于批作业 管控好 RocksDB 等外部组件的内存,避免在容器环境下用量不受控导致被 KILL 消除不同部署模式下配置参数的歧义,消除 cut-off 等参数语义模糊的问题 提出了两个设计提案 FLIP-49: Unified Memory Configuratio
腾讯云大数据
2022/08/26
1K0
Flink TaskManager 内存管理机制介绍与调优总结
Flink TaskManager 内存管理机制介绍与调优总结
Flink 的新版内存管理机制,要追溯到 2020 年初发布的 Flink 1.10 版本。当时 Flink 社区为了实现三大目标:
KyleMeow
2022/06/15
7.6K1
Solaris 10上Matlab 7(R14)安装手记
在veryCD下载3个iso文件和license文件。 上传到Solaris服务器。 挂载iso文件  # lofiadm -a $isopath/cd1.iso /dev/lofi/1 #mkdir /mnt/iso1 #mount -F hsfs /dev/lofi/1 /mnt/iso1 创建安装路径 $MATLAB 拷贝license.dat到 $MATLAB 下 执行install #mnt/iso1/install  ... 安装完毕后,license.lic的安装 修改li
贰师兄TEN
2020/12/08
5280
如何在HDFS上查看YARN历史作业运行日志
在未开通Yarn Web界面端口8088,或者开通了8088,没有开通单个NodeManager如8042时,在MapReduce作业有失败时,往往我们没法直接通过界面查看某个container具体报错日志,从而不方便分析作业出错原因。这时,我们可以在HDFS上查看MapReduce的历史作业日志。本篇文章主要介绍如何通过HDFS查看YARN历史作业Container日志。
Fayson
2018/03/29
6.2K0
如何在HDFS上查看YARN历史作业运行日志
Flink 提交作业运行的各种模式总结
关于 Flink 的 Application Mode 自己还比较陌生,像 -d 等参数自己也不熟悉,决定好好总结一下,基于 Flink-1.12.x
shengjk1
2021/02/01
2K0
Flink 提交作业运行的各种模式总结
点击加载更多

相似问题

heroku错误R14上的Sidekiq (内存配额超出)

22

heroku上的R14(超出内存配额错误)

127

错误R14 (内存配额超出)--在Heroku上使用EHCache

10

Heroku错误R14 (超出内存配额)的后果?

12

错误R14 (内存配额超出)+ Heroku +乘客

117
添加站长 进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

扫码加入开发者社群
关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例

扫码关注腾讯云开发者公众号
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文