我成功地在Redhat Linux6.5中安装了分布式R。我得到了“libRInside.so:无法打开共享对象文件:没有这样的文件或目录”异常，同时试图启动分布式R库？
浏览 4提问于2015-09-23得票数 1
我已经设置了一个Hadoop2.5集群，其中包含1个主节点( namenode和二级namenode和datanode)和2个从节点(Datanode)，机器的.All使用Linux CentOS 7-Datanodes在分布式数据存储方面开展工作，但我看不到任何分布式数据处理的迹象。我是否必须以其他方式配置xml配置文件，以便所有机器在运行MapReduce作业时都将处理数据？
谢谢
浏览 3提问于2014-09-20得票数 1
回答已采纳
好吧，所以我不确定如何在网络上安装文件锁。有两个JVM，每个JVM都运行在自己的机器上(都是Linux)。
然后在第三台计算机(Windows)上有一个文件共享。运行JVM的两台机器都使用CIFS/SAMBA安装了相同的windows文件共享。或者，即使该文件是网络共享挂载的，并且以某种方式绑定到Windows机器上的文件，该锁是否只在Linux机器的本地文件上使用？
浏览 8提问于2022-11-26得票数 0
回答已采纳
1回答
在Linux内核中，虚拟文件系统位于具体的文件系统和设备文件之上，为访问位于其下的文件系统提供了一个统一的接口。这些层的整体情况是怎样的？
谢谢。
浏览 5提问于2016-03-31得票数 0
24节点计算机实验室一直有硬件故障(主要是驱动器和冷却风扇)，所以我把它变成了一个基于Linux的瘦客户端网络。虽然工作站现在从网络引导，但大多数仍然有工作硬盘驱动器。每个工作站都有一个40 and的HDD、Pentium 4处理器和256 M RAM。在每个工作站上安装容错分布式文件系统。移除硬盘并将它们放入几个文件服务器中。在工作站上运行分布式计算客户端以利用空闲的CPU周期。好的，虽然我肯定会为更多的文件服务器找到一个位置，但我承认，对于分布
浏览 0提问于2009-07-14得票数 4
2回答
空间图像数据的分布式处理
、、、、
对于目标识别算法的开发，我需要在大量的体积图像文件(MR扫描)上反复运行一个检测程序。检测程序是命令行工具。如果我在本地计算机上运行单个文件和单线程，大约需要10秒。处理结果被写入文本文件。我可以访问一个由20个服务器组成的集群，每个服务器都有24个(虚拟)核心(Xeon E5、1 1TByte磁盘、CentOS Linux7.2)。理论上讲，480核应该只需要3.5分钟的任务。我正在考虑使用Hadoop，但它不是为处理二进制数据而设计的，它拆分输入文件，这不是一个选项
浏览 6提问于2016-04-27得票数 1
1回答
我正在开发一个分布式Linux system.In，我的bash脚本，我想要grep，它的输出是：如果机器停机，上述命令将挂起。如何处理挂起的问题，以及如何从具有非零值的bash脚本中提取？
浏览 0提问于2020-01-10得票数 0
回答已采纳
我用Java编写了一段简单的代码来读取csv文件，对行进行细微的修改(使用散列)，然后写入输出文件。
我想比较一下顺序版本(纯java)和MapReduce版本的代码。(代码没有太大区别)。我在伪分布式hadoop (单节点)和全分布式hadoop (3个节点)中都尝试过代码，但令我惊讶的是，MapReduce版本的执行时间总是高于顺序版本(近似两到三倍)。我在Hadoop方面没有太多经验，但至少分布式处理应该比串行处理花费更少的时间(因为这就是为什么我们有分布
浏览 3提问于2019-04-08得票数 0
是分布式文件存储(HDFS/Cassandra/S3等)是否强制spark在群集模式下运行？若有，原因为何？
Spark是用于计算海量数据的分布式数据处理引擎。假设我在mysql中存储了大量数据，我想对这些数据进行处理。Spark从mysql读取数据，并在集群节点本身上执行内存(或磁盘)计算。我仍然不能理解为什么在集群模式下运行spark需要分布式文件存储？
浏览 3提问于2021-03-25得票数 0
0回答
scp报错？
、、
Hadoop分布式集群安装问题解决：linux下scp把master配置好的hadoop文件传到slave节点报No such file or directory错误的解决
浏览 61提问于2022-09-20
2回答
hadoop的分布式替代方案
、、、、
什么是一些分布式和可伸缩的替代方案。我正在寻找一些分布式文件系统，如，HDFS，，它可以作为一个廉价和有效的存储，并希望在上面的数据处理引擎(批处理/实时)。我知道火花是个不错的选择。但是我想用这个系统作为一个文件存档，它是分布式的，容错的，scalable.Is有什么解决方案吗？欢迎提出建议。谢谢:)
浏览 3提问于2016-08-17得票数 6
回答已采纳
1回答
OpenAFS可以用作NFS吗？
、、、、
我有一个仅在Linux上运行的应用程序，它将在下一年生成大约500 up的数据，所有这些数据都必须每天保存和备份。AFS隐藏了它的分布式特性，因此处理AFS文件看起来和感觉都像处理存储在本地机器上的文件。问题
这是否意味着，我可以使用OpenAFS而不是NF
浏览 0提问于2015-04-15得票数 0
回答已采纳
1回答
df.to_csv(r'hdfs://quickstart.cloudera.8020/user/cloudera/files.csv', sep=',', index=True)
我在那个位置有一个目录：“文件
浏览 1提问于2019-06-03得票数 3
1回答
我试图让Linux2.2在WebAPI环境下自我托管，这可以用Mono来完成，问题是我使用事务范围来处理分布式事务，那么它在非windows平台上支持吗？
浏览 5提问于2016-10-24得票数 1
回答已采纳
2回答
我正在使用Java开发一个分布式文件系统，目前我不能给出太多细节。我需要在Linux上测试一些东西，我将使用WMWare服务器并在虚拟机中安装Linux。模拟网卡和真实的以太网接口有什么不同吗？
浏览 4提问于2009-08-04得票数 0
回答已采纳
我想问你，在linux上拥有一个现成的分布式文件系统(如HadoopFS)比仅仅通过网络挂载一个驱动器有什么利弊？
干杯!
浏览 0提问于2012-11-30得票数 1
我刚刚开始学习Hadoop，我对如何以分布式方式存储数据感到有点困惑。我有MPI背景。对于MPI，我们通常有一个主处理器，它将数据发送到各种其他处理器。这是由程序员显式完成的。有了Hadoop，您就拥有了Hadoop分布式文件系统(HDFS)。那么，当您将本地服务器中的某些文件放入HDFS时，HDFS是否会自动以分布式方式存储此文件，而无需程序员执行任何操作？
浏览 8提问于2019-01-26得票数 1
回答已采纳
我希望在运行AG时使用Linux将Windows上的Server 2014迁移到SQL Server 2019。此外，我建议在Linux中使用的集群方法是什么？
最后，我在AWS上使用了EC2。
浏览 0提问于2020-01-24得票数 2
我想将ZFS作为一个分布式文件系统运行(比如Gluster或CEPH)。Linux上的OpenZFS和ZFS还没有文件系统集群。我的理解是分布式的，目前是ZFS在专有(付费) Solaris中的一个特性。在Opensolaris中也有吗？
集群将与两个单独的服务器一起使用，每个服务器都使用自己的JBOD。
浏览 0提问于2019-11-07得票数 2
回答已采纳
4回答
火花基本面
、、
在复习基本面时，我不太清楚一些基本的事情：
查询1.对于分布式处理--可以不使用HDFS - Hadoop文件系统而在集群上工作(比如创建自己的分布式文件系统)，还是需要一些基本的分布式文件系统，如HDFS查询2.如果我们已经在HDFS中加载了一个文件(作为分布式块)，那么Spark将再次将其转换为块，并在其级别上重新分发(用于分布式处理)，或者只使用Haddop HDFS集群中的块分发。
浏览 7提问于2015-08-24得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
