1回答
我正在处理的R包中有一些函数(如function1)依赖于我的包中的助手函数(如h_function1和h_function2)。我正在并行化，以便在包中的另一个函数中重复调用function1。目前，在我的包中我使用的是以下代码 parallel::clusterExport(cl, varlist=c("h_fun
浏览 17提问于2020-10-21得票数 3
回答已采纳
我再次尝试使用parLapply (现在在中成功地使用了它)，但这一次要并行化的函数包含了mc2d包中的一些函数(即。deprt，ppert)。在代码的并行部分之前，我安装并加载了包。我使用集群导出成功地将我的变量导出到集群，...但是，我尝试使用以下命令导出函数d
浏览 1提问于2014-06-19得票数 5
1回答
我正在尝试在一个R包中实现并行计算，该包使用.C函数从R调用C。集群的节点似乎不能访问动态库。我做了一个并行socket集群，如下所示：我想使用R包parallel中的clusterEvalQ在集群中的每个节点上评估R包中名为valgrad<e
浏览 46提问于2018-10-30得票数 2
虽然parLapply有几个问题，但我无法找到我当前任务的答案。的问题如果我运行的代码，核心找不到SFM.within或SFM.firstDiff。SFM.within & SFM.firstDiff是我的包fepsfrontieR中的复杂函数。
问题：我如何为集群提供我
浏览 0提问于2018-08-25得票数 0
回答已采纳
1回答
可以将包R.cache与包parallel一起使用。我正在做一些非常耗时的计算，我想在并行的同时使用缓存。library(R.cache)
clust
浏览 1提问于2016-12-09得票数 0
我正在从事一个需要在R中并行处理的项目，并且我是新的多巴列包。我想要做的是使用一个并行的foreach循环。由于问题的性质，这个foreach循环需要多次执行。我遇到的问题是在循环中使用cppfunction和cfunction。
当前的工作是为集群调用clusterEvalQ()并编译相关函数。然而，这是非常慢(~10秒，4个核心)。clusterEvalQ(c
浏览 0提问于2019-07-28得票数 3
回答已采纳
2回答
我正在使用R中的LQMM软件包进行非常耗时的分析。我将模型设置为星期四开始运行，现在是星期一，现在仍在运行。我对模型本身很有信心(作为标准MLM测试)，我对我的LQMM代码很有信心(使用相同的数据集运行了其他几个非常相似的LQMM，它们都花了一天时间运行)。但是，我真的很想弄清楚如何让它更快地运行，如果可能的话，使用我可以访问的机器的并行处理功能(注意，所有这些都是基于Microsoft的)。我已经
浏览 1提问于2015-05-04得票数 5
1回答
我需要多线程我的R应用程序，因为它需要5分钟的运行和只使用15%的计算机可用的CPU。运行一段时间的进程的一个例子是计算包含n层的非常大的光栅堆栈的平均值：使用并行库光栅包附带一个集群函数，它可以看到<em
浏览 0提问于2015-04-13得票数 6
回答已采纳
1回答
我想对一些文本文档进行聚类，以找到具有相同概念的文档。我已经使用潜在语义分析(LSA)进行了语义相似性分析，但我搞不清应该选择哪种聚类方法来实现我的目的。谢谢
浏览 1提问于2015-06-19得票数 0
1回答
我正在处理R中的一个计算密集型软件包。这个软件包没有与Spark集群交互的替代实现；但是，它确实有一个可选的参数来接受使用并行软件包创建的集群。我的问题是，我是否可以使用SparklyR之类的东西连接到spark集群，然后将该spark集群作为makeCluster命令的一部分传递到我的<em
浏览 27提问于2019-03-23得票数 1
1回答
在Hadoop服务器上分发R处理
、、、、
我目前有一个在本地运行的R代码。它由一个foreach部分组成，我已经使用%dopar%函数成功地并行化了这个部分。我希望将这个循环从单CPU上的并行化转换为Hadoop服务器上的发行版。有没有人能建议我一个合适的方法，以及我应该使用哪些包？
附加信息:我的Hadoop设置是一个Hortonworks HDP，并且我的foreach循环是令人尴尬的并行</
浏览 2提问于2017-04-05得票数 0
1回答
我正在开发一个R包，并且需要使用parallel::parLapply在集群上运行函数myfun。myfun从我的包中调用了几个额外的函数，这反过来又调用了更多的函数，其中一些函数有多个方法...因此，通过名称显式地将所有函数和方法传递给集群是非常麻烦的。但是对于R-CMD-check来说，对library(&
浏览 16提问于2021-05-19得票数 4
1回答
作业排队/工作量管理
、、、
我花了一些时间在谷歌上寻找R的排队/负载平衡包。我所要达到的目标是：知道这一点：
每个函数通常在10到30秒内平均每5分钟处理一次(但可以同时处理)一组将执行的8-15个函数发送到后端5分钟是一个平均值，多组数据可以同时发送，2x2R实例已经在运行，在加载所需
浏览 0提问于2011-05-18得票数 6
回答已采纳
2回答
我试图教自己如何使用降雪包，当我尝试调用第二个函数(这是我最终想要实现的功能的简化用例)时，我遇到了以下问题。val) :但是，如果然后运行lapply(1:10，f2)，我将收到以下输出]][1] 25
[1] 36
[1] 49
[1] 64
[1] 81
浏览 2提问于2013-09-09得票数 4
回答已采纳
2回答
您是否知道是否有计划在R中为所有包引入并行编程？我知道一些开发，比如R-revolution和并行编程包，但它们似乎有专门的功能，取代了最流行的功能(线性编程等)。然而，关于R的一个伟大的事情是大量的专业软件包，这些软件包每天都会支撑起来，使得复杂和耗时的分析非常容易运行。据我所知，你需要定义函数的</
浏览 1提问于2012-04-18得票数 2
回答已采纳
1回答
我正在尝试并行化(使用snow::parLapply)一些依赖于包(即snow以外的包)的代码。必须使用clusterExport将parLapply调用的函数中引用的对象显式传递到集群。有没有办法将整个包传递给集群，而不是显式地命名每个函数(包括用户函数调用的包的内部<em
浏览 3提问于2012-09-02得票数 7
回答已采纳
我想让我的R代码并行。我的代码的第一部分是使用Rmpi并行化并正确工作的，现在我想通过并行和斯诺包来并行第二部分(估计泛化错误)。当我使用这一行时：我知道这个错误：
makeMPIcluster(mpi.universe.size())中的错误:集群已经存在1。我使用这个函数<
浏览 0提问于2019-06-16得票数 2
1回答
当我使用下面的代码将库data.table加载到cpu集群时，r会抛出一个错误。但是data.table包安装在R上，当使用外部并行代码时，它工作得很好。out.txt")错误:-
clusterEvalQ(cl，库(data.table))在checkForRemoteErrors中的错误(lapply(cl，recvResult))：3个节点产生错误；第一个错误:没有称为&#x
浏览 1提问于2017-08-24得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
