我们在戴尔HW物理机器上有3台Hadoop HDFS服务器，当所有服务器都有RHEL 7.2版本时问题是我们没有找到1TB磁盘，我们只能购买带有2TB的磁盘。
第二个问题是，当处理HDFS磁盘时，所有HDFS磁盘必须具有相同的大小。因为旧服务器上的磁盘可以达到10
浏览 0提问于2022-06-15得票数 -1
回答已采纳
1回答
HDFS磁盘已满
、、、
在我们的Ambari集群中，HDFS磁盘的使用率达到了100%。我想删除HBase中的表来释放磁盘，但是hbase (主版)没有启动。有正确的方法释放磁盘空间吗？还是我应该重新安装ambari集群？HDP版本为2.4.2，HDFS版本为2.7.1，Hbase版本为1.1.2
浏览 3提问于2017-02-16得票数 1
回答已采纳
我对HDFS存储和数据节点存储有点困惑。以下是我的怀疑。
向Suresh致意
浏览 6提问于2014-04-22得票数 1
1回答
HDFS如何写入物理磁盘？HDFS是否确保这些物理块是连续的？(连续块增加FS吞吐量，因为它最小化了搜索时间)？HDFS如何提供高吞吐量？
浏览 6提问于2014-04-18得票数 1
3回答
有些地方出了问题，它几乎消耗了C驱动器中所有可用的磁盘空间。因此，我关闭了资源管理器、节点管理器、名称Node、数据节点控制台。现在我有一个C驱动器，它几乎已经满了，我不知道如何清空磁盘空间，并使我的C驱动器像以前一样。我现在该怎么办。任何帮助都是非常感谢的。
浏览 7提问于2015-04-17得票数 0
4回答
我知道HDFS在数据节点中使用常规的linux文件系统存储数据。我的HDFS块大小是128 MB。假设我的hadoop群集中有10 GB磁盘空间，这意味着，HDFS最初有80 blocks作为可用存储。
如果我创建一个比方说12.8 MB的小文件，#available HDFS块将变为79。在前一种情况下，HDFS基本上在每次块分配后根据可用磁盘空间重新计算#可用块，因此，只有在超过128MB的磁盘空间被消耗后，#可用块才会变为78。请澄清。
浏览 0提问于2013-02-25得票数 16
回答已采纳
4回答
是否有一种方法或命令可以让我了解每个datanode的磁盘空间或整个集群磁盘空间？dfs -du -h /
但是，我似乎没有对许多目录执行它的权限，因此无法获得实际的磁盘空间。
浏览 2提问于2017-08-22得票数 4
回答已采纳
HDFS磁盘均衡器是Hadoop3的一个新特性。在Hadoop2中使用HDFS磁盘均衡器的最佳替代方法是什么？
浏览 22提问于2019-07-05得票数 1
OS: Ubuntu我正在尝试在挂载磁盘上配置hadoop(2.7.2)集群，而不是在默认磁盘上。已挂载的磁盘为'/mnt/raid‘，并在hdfs-site.xml中执行了以下配置<property> <value>1</value> <n
浏览 2提问于2016-03-17得票数 0
预期的输出是几行文本，而我的磁盘还远远没有满(至少10 at空闲)。代码是一些我不能在这里发布的通用mapreduce工作，因为它是大学的知识产权。
关于如何解决“没有可用空间”错误，有什么建议吗？PS:我已经解决了，就像这里说的：由用户"banu“免费的硬盘空间需要至少10%以上的磁盘。
浏览 4提问于2020-11-14得票数 2
回答已采纳
1回答
我正在尝试实现这样的场景:我可以拆分本地linux上的gz文件，并将其作为部分解压缩或压缩文件上传到hdfs，而无需将拆分的输出写入磁盘。在尝试以下命令后，我遇到了问题。下面的命令写到本地磁盘，然后我可以上传到我不想要的hdfs :-
hdfs dfs -copyFromLocal ./*file.part* /folder/in/<
浏览 0提问于2017-10-07得票数 0
回答已采纳
1回答
我知道RDD可以在内存、磁盘或两者中持久化/缓存，但是否也可以将其保存在HDFS上。我面临的问题是，集群上的内存和磁盘空间太少，而我的HDFS空间却很大。
浏览 2提问于2016-10-26得票数 3
GCP dataproc -当您终止dataproc集群时，HDFS会自动删除。如何使其持久化HDFS即使您删除了dataproc集群，它也不应该删除HDFS？有可能吗？
浏览 7提问于2021-05-12得票数 2
当我运行"hdfs -report“时，我得到了如下(简化)的内容：Present Capacity: 400GB
DFS Remaining: 300
浏览 3提问于2015-06-26得票数 4
回答已采纳
在POC的3节点集群安装中，我的第三个注意事项是DataNode，它有大约200 GB的磁盘空间。根据ambari的HDFS磁盘使用小部件，我当前的HDFS使用情况如下：当我执行df -h检查磁盘大小时，我可以看到tmpfs占用了大量空间，如以下屏幕截图所示：我如何才能将该空间用于我的HDFS。
浏览 1提问于2016-02-25得票数 0
和上面一样，我想知道如何检索HDFS DISK USAGE METRICS DATA，如果有人知道，请帮助我。
浏览 3提问于2015-06-30得票数 0
在Hadoop中，所有映射器输出都存储在本地磁盘中(而不是HDFS中)。任何Hadoop作业都有可能没有reducer。感谢和问候，KB Devaraj
浏览 0提问于2015-07-23得票数 1
1回答
我们的HDFS大小几乎是80T，而且我们有98%的可用容量！因此，我们正在考虑将HDFS复制因子从3降到2。我们来做个模拟，，但问题是-从以前的3个复制因子创建的第三个数据仍然存在于HDFS磁盘中。或者可能-没有任何选项删除旧的数
浏览 0提问于2020-07-16得票数 1
回答已采纳
云服务器
ICP备案
对象存储
即时通信 IM
云直播
腾讯云开发者
