zoukankan      html  css  js  c++  java
  • Hadoop 常用命令

    -help:查看rm命令
    hdfs dfs -help rm

    -mkdir:递归创建目录
    hdfs dfs -mkdir -p /Test/dir

    -ls:显示目录信息
    hdfs dfs -ls /

    -cat:显示文件内容
    hdfs dfs -cat /Test/dir/aaa.txt

    -chgrp 、-chmod、-chown:Linux文件系统中的用法一样,修改文件所属权限
    hdfs dfs  -chmod  666  /Test/dir/aaa.txt
    hdfs dfs  -chown  atguigu:atguigu   /Test/dir/aaa.txt

    -moveFromLocal:从本地剪切粘贴到HDFS
    hdfs dfs  -moveFromLocal  ./aaa.txt  /Test/dir

    -appendToFile:追加一个文件到已经存在的文件末尾
    hdfs dfs -appendToFile bbb.txt /Test/dir/aaa.txt

    -copyFromLocal:从本地文件系统中拷贝文件到HDFS路径去
    hdfs dfs -copyFromLocal README.txt /

    -copyToLocal:从HDFS拷贝到本地
    hdfs dfs -copyToLocal /Test/dir/aaa.txt ./

    -cp:从HDFS的一个路径拷贝到HDFS的另一个路径
    hdfs dfs -cp /Test/dir/aaa.txt /zhuge.txt

    -mv:在HDFS目录中移动文件
    hdfs dfs -mv /zhuge.txt /Test/dir/

    -get:等同于copyToLocal,就是从HDFS下载文件到本地
    hdfs dfs -get /Test/dir/aaa.txt ./

    -getmerge:合并下载多个文件,比如HDFS的目录 /user/atguigu/test下有多个文件:log.1, log.2,log.3,...
    hdfs dfs -getmerge /user/atguigu/test/* ./zaiyiqi.txt

    -put:等同于copyFromLocal
    hdfs dfs -put ./zaiyiqi.txt /user/atguigu/test/

    -tail:显示一个文件的末尾
    hdfs dfs -tail /Test/dir/aaa.txt

    -rm:删除文件或文件夹
    hdfs dfs -rm /user/atguigu/test/jinlian2.txt

    -rmdir:删除空目录
    hdfs dfs -mkdir /test

    -du统计文件夹的大小信息
    hdfs dfs -du -s -h /user/atguigu/test

    -setrep:设置HDFS中文件的副本数量
    hdfs dfs -setrep 10 /Test/dir/aaa.txt

  • 相关阅读:
    synchronized关键字的用法
    for循环删除集合陷阱
    Java之可变参数
    下拉菜单中的Option对象
    JavaScript数组
    线程
    尝试用代码写博客
    环境配置大全
    3中边缘检测算子
    caffe新手入门
  • 原文地址:https://www.cnblogs.com/smandar/p/13993095.html
Copyright © 2011-2022 走看看