博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
hadoop常用命令
阅读量:6275 次
发布时间:2019-06-22

本文共 1053 字,大约阅读时间需要 3 分钟。

  • 启动Hadoop
  1. 进入HADOOP_HOME目录。
  2. 执行sh bin/start-all.sh
  • 关闭Hadoop
  • 1、查看指定目录下内容
  1. 进入HADOOP_HOME目录。
  2. 执行sh bin/stop-all.sh

文件操作 Hadoop使用的是HDFS,能够实现的功能和我们使用的磁盘系统类似。并且支持通配符,如*。

  • 2、打开某个已存在文件 hadoop dfs –cat [file_path]

eg:hadoop dfs -cat /user/wangkai.pt/data.txt

  • 3、将本地文件存储至hadoop hadoop fs –put [本地地址] [hadoop目录]

hadoop fs –put /home/t/file.txt /user/t

(file.txt是文件名)

  • 4、将本地文件夹存储至hadoop hadoop fs –put [本地目录] [hadoop目录] hadoop fs –put /home/t/dir_name /user/t

(dir_name是文件夹名)

  • 5、将hadoop上某个文件down至本地已有目录下 hadoop fs -get [文件目录] [本地目录]

hadoop fs –get /user/t/ok.txt /home/t

  • 6、删除hadoop上指定文件 hadoop fs –rm [文件地址]

hadoop fs –rm /user/t/ok.txt

  • 7、删除hadoop上指定文件夹(包含子目录等) hadoop fs –rm [目录地址]

hadoop fs –rmr /user/t

  • 8、在hadoop指定目录内创建新目录 hadoop fs –mkdir /user/t
  • 9、在hadoop指定目录下新建一个空文件 使用touchz命令:

hadoop fs -touchz /user/new.txt

  • 10、将hadoop上某个文件重命名 使用mv命令:

hadoop fs –mv /user/test.txt /user/ok.txt (将test.txt重命名为ok.txt)

  • 11、将hadoop指定目录下所有内容保存为一个文件,同时down至本地 hadoop dfs –getmerge /user /home/t
  • 12、将正在运行的hadoop作业kill掉 hadoop job –kill [job-id]

转载于:https://my.oschina.net/taomac/blog/125887

你可能感兴趣的文章
js 判断整数
查看>>
建设网站应该考虑哪些因素
查看>>
mongodb $exists
查看>>
js实现页面跳转的几种方式
查看>>
sbt笔记一 hello-sbt
查看>>
常用链接
查看>>
pitfall override private method
查看>>
!important 和 * ----hack
查看>>
聊天界面图文混排
查看>>
控件的拖动
查看>>
svn eclipse unable to load default svn client的解决办法
查看>>
Android.mk 文件语法详解
查看>>
QT liunx 工具下载
查看>>
内核源码树
查看>>
Java 5 特性 Instrumentation 实践
查看>>
AppScan使用
查看>>
Java NIO框架Netty教程(三) 字符串消息收发(转)
查看>>
Ucenter 会员同步登录通讯原理
查看>>
php--------获取当前时间、时间戳
查看>>
Spring MVC中文文档翻译发布
查看>>