zoukankan      html  css  js  c++  java
  • hadoop常用命令

    fs命令:

    输入“hadoop fs”将输出能够支持的命令列表。常用命令如下所示:

    1)使用bin/hadoop fs -ls / 查看hdfs根目录下的文件。

    2)使用bin/hadoop fs -mkdir (-p子目录同父目录一起创建) 在hdfs中创建目录,有时候存在创建不成功的情况,原因之一就是hdfs处于安全模式,需要关闭安全模式之后再创建。

    4)上传文件:hadoop fs -put /home/hadoop/1.txt(本地上传文件路径) /user/input(集群路径)

    5)查看txt文件内容:hadoop fs -text /user/input/1.txt,此命令是使用txt文本的格式查看文件内容,除了文本文件还可以查看压缩文件,例如SequenceFile。还可以使用-cat、tail参数查看文本文件的内容。

    6)hadoop -fs -get /user/input/1.txt 复制到本地。

    7)hadoop -fs -rm /user/input/1.txt  删除文件

    dfsadmin命令:

    输入“hadoop dfsadmin”将输出能够支持的命令列表。

    8)hadoop dfsadmin -safemode get  获取安全模式状态(on/off)

    9)关闭安全模式:bin/hadoop fs -dfsadmin -safemode leave 

    job命令:

    用于和MapReduce作业进行交互,输入“hadoop job”查看支持的命令列表。

    fsck命令:

    “hadoop fsck”

    version命令:

    “hadoop version”查看hadoop版本

    balance命令:

    实现集群的负载均衡。"hadoop balance"

    Namenode命令:

    也就是对hdfs的格式化,“hadoop namenode -format”

    关于fsck命令可参考:

    http://www.cnblogs.com/lz3018/p/4974416.html

    更多命令参考:

    http://www.cnblogs.com/linjiqin/p/3147856.html

  • 相关阅读:
    搞明白这八个问题,Linux系统就好学多了
    Fedora 25 Alpha版本今天发布啦
    Linux新手应掌握的10个基本命令
    PC-BSD 换名 TrueOS
    JPA+Springboot实现分页效果
    陈亮
    押尾光太郎
    岸部真明
    面试必备-网络的七层协议
    JavaScript中的快速排序
  • 原文地址:https://www.cnblogs.com/lz3018/p/4890913.html
Copyright © 2011-2022 走看看