我有一个从csv加载的数据,大约5.4GB,包含210个列和大约200000行。
我在dataframe上运行了这个函数:
cnts = (df.select([countDistinct(c).alias(c) for c in df.columns]).first().asDict())
我的系统有32 My内存,这个任务太慢了,显示了13.5小时的任务时间,这正常吗?或者,我做错了什么,我们可以加快速度吗?这是POC在windows服务器上独立安装spark。
我的应用程序在本地运行得很好,但是当推送到heroku时,它会在一个特定的操作上崩溃:打开PDF文档。我使用进行文档渲染,它使用wkhtmltopdf中间件。下面是我的错误消息:
2015-03-20T23:35:11.306857+00:00 app[web.1]: Processing by PcsController#show as HTML 2015-03-20T23:35:11.605847+00:00 app[web.1]: Rendered pcs/show.html.erb within layouts/application (27.5ms) 2015-03-20T23:
我们正在使用Python/Django构建一个学校信息系统。生产服务器运行Ubuntu,带有mod_wsgi的Apache2。最近,我们的服务器发生了一些奇怪的事情。当我们在本地测试代码时,一切都运行得很好。部署后,应用程序可以正常工作,但有时会返回“Page not found”或“Division by zero”错误。为什么会发生这种情况,无论是攻击还是服务器配置,请帮帮我们!
似乎chkservd经常不得不在我们的服务器上重新启动服务,我很好奇这种频率是否常见,或者我们是否应该考虑VPS的可靠性。也就是说,在“好的”服务器上,服务每隔几周重新启动一次,还是不应该经常发生?
这里总结了7月份失败+重新启动的频率:
July 30 named
July 20 httpd
July 19 httpd
July 16 httpd
July 10 httpd
July 8 imap, mysql, spamd
July 6 named
July 3 named
服务器详细信息:
cPanel 11.24.5-R37629 - WHM 11.24.2 - X 3.9
CE
我有一个带有Ubuntu 14和1GBRAM的个人服务器。我想配置运行在此服务器中的Liferay中的Glassfish。
我正在尝试,但是初始化过程给了我这样的信息:
OpenJDK 64-Bit Server VM warning: INFO: os::commit_memory(0x00000000c8bd7000, 84496384, 0) failed; error='Cannot allocate memory' (errno=12)
#
# There is insufficient memory for the Java Runtime Environment
我正在Analysis Services中处理(分区)我的一个表,但它失败了。这个分区大约有6M行。我尝试处理其他有5M行的分区,它成功了。
错误消息类似于:
The following system error occurred: Insufficient quota to complete the requested service.
我正在开发一个应用程序,它的Activity中有很多Activity,但是它们的大小之和大约是2MB。当用户单击一个按钮时,将显示另一个Activity,但当前的一个将重新启动,我可以在logcat中看到下面的错误。怎么了?!
12-06 17:53:07.224: E/dalvikvm-heap(3938): 7704000-byte external allocation too large for this process.
12-06 17:53:07.224: E/dalvikvm(3938): Out of memory: Heap Size=5895KB, Allocated=3