我可以使用一大堆Mac台式机，其中的硬盘没有得到充分利用。我想设置一个分布式文件系统，将它们组合到一个大的虚拟卷中。服务器必须能够以普通用户身份运行。
浏览 1提问于2010-09-08得票数 0
回答已采纳
然而，在非分布式文件系统中，rm -rf对于类似大小的目录所需时间要长得多。
为什么会有这么大的不同？我有一个2节点集群
浏览 5提问于2013-10-10得票数 1
回答已采纳
2回答
分布式文件源
、、、
寻找一个软件解决方案来存储大文件(>50MB -1.5 to )，分布在多个服务器上。我们已经了解了MogileFS，但是，考虑到现有的软件需求，需要有一个NFS接口。然而，我更喜欢开源，对所有选项都开放。
浏览 1提问于2008-10-01得票数 1
Hadoop Map Reduce和Google Map Reduce有什么区别？
浏览 2提问于2012-07-08得票数 18
1回答
问题是，有没有办法让它们像一个大驱动器一样工作，而不是像3个独立的系统一样工作。我需要更多的吞吐量，我认为这是一种可能性。也许是像Hadoop这样的分布式文件系统？
浏览 0提问于2011-10-27得票数 2
回答已采纳
我可以访问一堆Mac台式机，它们的硬盘驱动器利用率很低.我想要设置一个分布式文件系统，将它们合并成一个大的虚拟卷。服务器必须能够以正常用户的身份运行。
浏览 0提问于2010-09-07得票数 4
回答已采纳
1回答
分布式版本控制的三大巨头(Git、Bazaar和Mercurial)对待分支的方式各不相同。例如，在Bazaar中，分支是单独的存储库(实际上是父存储库的不同副本)；在您的文件系统中，不同的分支位于不同的目录中。另一方面，在Git中，您可以在同一个repo中存在多个分支(因此在您的文件系统上的同一目录中)。Mercurial支持，后者支持。
这些不同分支模型的优缺点是什么？
浏览 0提问于2009-11-01得票数 11
我启动了我的存贮器和kafkaServer，并能够从生产者发送消息给消费者，但我不知道如何处理一个图像，并将它从生产者发送到消费者？./bin/zookeeper-server-start.sh config/zookeeper.properties./bin/kafka-server-start.sh config/server.properties./bin/kafka-topics.sh --create --zookeeper localhost:2181 --
replication-factor 1 --partition
浏览 1提问于2019-04-09得票数 1
2回答
我正在设计一个应用程序，它需要非常快的响应，并且需要从hadoop文件系统中检索和处理大量数据(>40G)，只要输入(命令)。我在想，如果可以使用spark在分布式内存中捕获这么多的数据，并让应用程序一直运行下去的话。如果我给应用程序一个命令，它可以根据输入开始处理数据。
我认为捕捉这么大的数据不是问题。
浏览 5提问于2016-11-02得票数 2
回答已采纳
1回答
大型对象的分布式缓存
、、、、
我想要在一组机器之间共享一个非常大的对象，例如以兆字节甚至几个千兆字节的数量级。该对象将被写入一次，但可能会被多次读取。也许一种天真的方法是使用像这样的通用存储。然后，分布式解决方案更有前途。
浏览 4提问于2013-01-29得票数 10
回答已采纳
1回答
我开始了解hadoop。我对它有了一些了解，但是当我读到关于Hive，Pig和其他Apache工具时，我感到很困惑。因此，有人能简单地概述一下hadoop和Apache的工具(Hive、Pig、等)，我想知道它们在处理大数据时是如何和在哪里使用的。
浏览 3提问于2014-05-20得票数 0
回答已采纳
2回答
我想澄清一下我对hadoop分布式缓存的理解。我知道，当我们将文件添加到分布式缓存时，这些文件会加载到集群中每个节点的磁盘上。
那么如何将文件的数据传输到集群中的所有节点呢？它是通过网络传输的吗？
浏览 2提问于2012-10-25得票数 2
回答已采纳
在分布式环境中，每天存储50 of的日志有问题。我看过Hadoop，但是由于它在Windows基础设施上运行有问题，缺少多语言的文件系统API，所以不太适合我。我面临的唯一大问题是磁盘空间的使用。以下是数字：
原始日志大小为224 is。
浏览 5提问于2010-06-28得票数 1
回答已采纳
我需要流读取到非常大的文件(在TBs中)。为了达到更高的吞吐量，如果我们能够缓存文件部分在内存中。Spark可以在分布式内存中缓存数据。如何使用spark缓存文件部件？
浏览 1提问于2014-05-08得票数 1
回答已采纳
我需要创建一个Python脚本，该脚本创建一个FASTA文件，其中包含来自/ .fa /pvalb/的所有文件的所有记录。脚本应该能够获取一个文件列表并输出所有文件的内容(实质上是模仿bash中的cat命令)。> import sys> filenames = sys.argv[1:]> for filename in filenames:> line = line.rstrip("\n")
>
浏览 5提问于2022-04-17得票数 0
回答已采纳
2回答
我有以下情况：一个应用程序有一些物理文件，另一个应用程序应该请求文件内容。发送文件的最佳方法是什么？的一个想法是在字节数组中读取内存中的文件，并序列化该数组，并在消息中发送文件内容。你还有别的主意吗？
浏览 2提问于2013-12-23得票数 0
回答已采纳
1回答
猪窝Hbase的不同之处
、、、
我是hadoop技术的新手。我正在尝试弄清楚这些Pig Hive和Hbase用于哪种类型的数据(结构化、非结构化、半结构化)？
浏览 3提问于2015-01-05得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
