专栏首页SQL/ORACLEhadoop常用命令

hadoop常用命令

启动Hadoop 进入HADOOP_HOME目录。 执行sh bin/start-all.sh 关闭Hadoop 进入HADOOP_HOME目录。 执行sh bin/stop-all.sh

1、查看指定目录下内容

hadoop dfs –ls [文件目录]

eg: hadoop dfs –ls /user/wangkai.pt

2、打开某个已存在文件

hadoop dfs –cat [file_path]

eg:hadoop dfs -cat /user/wangkai.pt/data.txt

3、将本地文件存储至hadoop

hadoop fs –put [本地地址] [hadoop目录]

hadoop fs –put /home/t/file.txt /user/t

(file.txt是文件名)

4、将本地文件夹存储至hadoop

hadoop fs –put [本地目录] [hadoop目录] hadoop fs –put /home/t/dir_name /user/t

(dir_name是文件夹名)

5、将hadoop上某个文件down至本地已有目录下

hadoop fs -get [文件目录] [本地目录]

hadoop fs –get /user/t/ok.txt /home/t

6、删除hadoop上指定文件

hadoop fs –rm [文件地址]

hadoop fs –rm /user/t/ok.txt

7、删除hadoop上指定文件夹(包含子目录等)

hadoop fs –rm [目录地址]

hadoop fs –rmr /user/t

8、在hadoop指定目录内创建新目录

hadoop fs –mkdir /user/t

9、在hadoop指定目录下新建一个空文件

使用touchz命令:

hadoop fs -touchz /user/new.txt

10、将hadoop上某个文件重命名

使用mv命令:

hadoop fs –mv /user/test.txt /user/ok.txt (将test.txt重命名为ok.txt)

11、将hadoop指定目录下所有内容保存为一个文件,同时down至本地

hadoop dfs –getmerge /user /home/t

12、将正在运行的hadoop作业kill掉

hadoop job –kill [job-id]

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Hadoop常用命令

    HDFS基本命令: hadoop fs -cmd cmd: 具体的操作,基本上与UNIX的命令行相同 args:参数 HDFS资源URI格式: scheme:/...

    用户3003813
  • Hadoop常用命令

    ZONGLYN
  • Hadoop常用命令总结

    1、启动hadoop所有进程 start-all.sh等价于start-dfs.sh + start-yarn.sh

    庞小明
  • 【Hadoop篇】--Hadoop常用命令总结

    1、启动hadoop所有进程 start-all.sh等价于start-dfs.sh + start-yarn.sh

    LhWorld哥陪你聊算法
  • No.121 爬虫:Hadoop常用命令

    对HDFS文件系统,scheme是hdfs,对本地文件系统,scheme是file。

    新码农
  • Hadoop学习笔记——Hadoop常用命令

    Hadoop下有一些常用的命令,通过这些命令可以很方便操作Hadoop上的文件。 1、查看指定目录下的内容 语法: hadoop fs -ls 文件目录 2、打...

    zhaozhiyong
  • Hadoop学习笔记——Hadoop常用命令

    zhaozhiyong
  • 大数据学习之路03——Hadoop常用命令详解

    从键盘读取输入到hdfs file中,按Ctrl+D(Control+D)结束输入。hdfs file不能存在,否则命令不会执行

    汪志宾
  • hadoop-2.6.0常用命令记录 原

    尚浩宇
  • hadoop常用维护命令

    字母哥博客
  • 常用hadoop dfs命令

    陌涛
  • Hadoop hdfs dfs常用命令的使用

    1,-mkdir 创建目录 Usage:hdfs dfs -mkdir [-p] < paths> 选项:-p 很像Unix mkdir -p,沿路径创...

    实时计算
  • 大数据:hadoop常用操作命令

    许喜朝
  • hadoop常用的基本命令,HIVE复制文件,修改文件名

    创建目录 hadoop dfs -mkdir /home 上传文件或目录到hdfs hadoop dfs -put hello / hadoop dfs -p...

    学到老
  • hadoop常用的基本命令,HIVE复制文件,修改文件名

    学到老
  • Hadoop HDFS 常用文件操作命令

    一份执着✘
  • hadoop HDFS常用文件操作命令

    命令基本格式: hadoop fs -cmd < args > 1. ls  列出hdfs文件系统根目录下的目录和文件 hadoop fs -ls /dir ...

    互联网金融打杂
  • hadoop fs 命令使用

    大数据工程师-公子
  • Mac 常用命令Mac 常用命令

    贺贺V5

扫码关注云+社区

领取腾讯云代金券