我想查看我通过合并创建的文本文件的第2-5行。我所能找到的只是头命令或尾命令,但我需要使用命令查看这组特定的行。
发布于 2022-09-07 13:11:25
HDFS文件被分割成块。并不是所有的文件都是“行分隔的”,因此这不是任何HDFS工具公开的常见操作。
为此,您需要编写自己的程序,例如MapReduce、Hive、Pig或Spark (以某种方式将行号添加为字段/列,然后通过范围查询选择/筛选)。
但是,您也可以使用hdfs head
命令,给出您的结束偏移量(5),然后以差+1 (5-2 +1= 4)的方式输入Unix tail
命令,并得到“头的最后4行”,或第2-5行(包括在内)。
https://stackoverflow.com/questions/73630375
复制相似问题