hadoop常用命令汇总[通俗易懂]

hadoop常用命令汇总[通俗易懂]1、查看目录下的文件列表:hadoop fs –ls [文件目录]hadoop fs -ls -h /lance 2、将本机文件夹存储至hadoop上:hadoop fs –put [本机目录] [hadoop目录] hadoop fs -put lance / 3、在hadoop指定目录内创建新目录:hadoop fs –mkdir [目录] hadoop fs -mkdir /lance4、在…

大家好,又见面了,我是你们的朋友全栈君。1、查看目录下的文件列表:hadoop fs –ls [文件目录]

hadoop fs -ls -h /lance 

2、将本机文件夹存储至hadoop上:hadoop fs –put [本机目录] [hadoop目录] 

hadoop fs -put lance / 

3、在hadoop指定目录内创建新目录:hadoop fs –mkdir [目录] 

hadoop fs -mkdir /lance

4、在hadoop指定目录下新建一个文件,使用touchz命令:

hadoop fs -touchz /lance/tmp.txt 

5、将本机文件存储至hadoop上:hadoop fs –put [本机地址] [hadoop目录]

hadoop fs -put tmp.txt /lance #直接目录

hadoop fs -put tmp.txt hdfs://www.lance.com/lance #远程服务器地址

6、打开已存在文件:hadoop fs –cat [文件名称]

hadoop fs -cat /lance/tmp.txt 

7、重命名hadoop fs –mv [旧文件名] [新文件名]

hadoop fs -mv /tmp /tmp_bak #修改文件夹名

8、将hadoop上文件down至本机已有目录下:hadoop fs -get [文件目录] [本机目录]

hadoop fs -get /lance/tmp.txt /lance 

9、删除hadoop上文件:hadoop fs -rm [文件地址] 

hadoop fs -rm /lance/tmp.txt 

10、删除hadoop上指定文件夹(包含子目录等):hadoop fs –rm -r [目录地址]

hadoop fs -rmr /lance 

11、将hadoop指定目录下所有内容保存为一个文件,同时下载至本机

hadoop dfs –getmerge /user /home/t

12、将正在运行的hadoop作业kill掉

hadoop job –kill  [jobId]

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/149533.html原文链接:https://javaforall.net

(0)
上一篇 2022年6月24日 下午6:36
下一篇 2022年6月24日 下午6:46


相关推荐

  • linux时间戳转换成时间指令_shell脚本获取时间戳

    linux时间戳转换成时间指令_shell脚本获取时间戳1、时间戳转换为正常显示的时间格式

    2022年10月2日
    5
  • IDM6.31注册机

    IDM6.31注册机IDM6 31Build3 6 31 3 注册机激活成功教程安装版 附注册机使用方法及教程 IDM6 31Build3 6 31 3 注册机激活成功教程安装版 附注册机使用方法及教程 官网下载 IDM 安装下载注册机复制注册机到 IDM 安装目录运行注册机程序打开 IDM 确认注册信息其他可能问题先贴上下载链接 1 百度网盘 https pan baidu com s 1JuL7l

    2026年3月18日
    2
  • Pycharm中不支持中文编码的解决方案。Pycharm中文报错。[通俗易懂]

    Pycharm中不支持中文编码的解决方案。Pycharm中文报错。[通俗易懂]版本信息: Pycharm5.0.3 python  2.7.101.打开Pycharm—-> File—->Defaultsetting——>Editor——->FileEncodings,如下图,设置成UTF-8,然后应用2. 然后回到主界面,然后设置成UTF-8.并在程序开始的时候,增加#

    2022年8月29日
    11
  • C++中int 转char

    C++中int 转charC 中 int 转 char inta 10 0 1 2 3 4 5 6 7 8 9 charb a 1 0 则 b 的值为字符 1

    2026年3月26日
    3
  • Flink 入门教程

    实时流处理的应用场景现在的社会已然进入了大数据AI时代,各行各业都有大量的数据需要处理,并希望从数据中挖掘价值。下面简单举几个例子:物联网中各种行为结果数据的实时收集分析金融行业中各种交易行为数据结果的实时收集分析电商行业中用户的浏览点击等行为数据结果的实时收集分析…实时流处理的目标低延迟高吞吐正确性可容错(即可以中断,并可以恢复且保证exactlyonce)顺序性(…

    2022年4月4日
    53
  • java socket datagramsocket_Java UDP通信:Java DatagramSocket类和DatagramPacket类

    java socket datagramsocket_Java UDP通信:Java DatagramSocket类和DatagramPacket类在TCP/IP协议的传输层除了一个TCP协议之外,还有一个UDP协议。UDP协议是用户数据报协议的简称,也用于网络数据的传输。虽然UDP协议是一种不太可靠的协议,但有时在需要较快地接收数据并且可以忍受较小错误的情况下,UDP就会表现出更大的优势。下面是在Java中使用UDP协议发送数据的步骤。使用DatagramSocket()创建一个数据包套接字。使用Datag…

    2022年6月10日
    35

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号