zoukankan      html  css  js  c++  java
  • Hadoop shell常用命令

    总结一些 Hadoop 常用的 shell 命令:

    命令说明
    hdfs fs -help 查看命令帮助
    hdfs fs -ls / 查看 hdfs 根目录下的文件列表
    hdfs fs -put localsrc dst
    hdfs fs -f -put localsrc dst
    上传本地文件到 hdfs,若文件已存在则报错;
    若文件存在,则覆盖上传
    hdfs fs -get src localdst 从 hdfs 下载文件到本地
    hdfs fs -cat file 查看某个文件内容
    hdfs fs -cp srcfile dstfile 复制某个文件到另一个目录下
    hdfs fs -df -h / 查看磁盘使用情况
    hdfs fs -du -s -h hdfs://jing-hadoop:9000/* 统计根目录下的所有文件大小;
    这里必须使用 hdfs 完整目录,否则统计不到
    hdfs fs -mkdir -p /aa/bb 递归创建文件夹;
    若不加 -p,不能递归创建
    hdfs fs -rm filename
    hdfs fs -rm -r /aa/bb
    hdfs fs -rm -r /aa
    删除指定文件;
    删除 bb 整个目录,aa 目录还在;
    删除整个 aa 目录及其子文件夹

    需要注意的是,在 Hadoop 中已上传的文件内容不能被修改,但可以在原文件后面追加内容。

  • 相关阅读:
    202103226-1 编程作业
    7 20210516-1 团队作业3—需求分析规格说明书
    原型设计作业
    案例分析作业
    202103226-1 编程作业
    阅读——《构建之法》
    第一周学习任务
    牛客app测评报告
    wordcount编程
    准备工作
  • 原文地址:https://www.cnblogs.com/cassielcode/p/12643736.html
Copyright © 2011-2022 走看看