zoukankan      html  css  js  c++  java
  • hdfs基本操作命令

    hdfs文件的相关操作主要使用hadoop fs、hadoop dfs、hdfs dfs 命令,以下对最常用的相关命令进行简要说明。 
    hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构 
    hadoop fs -mkdir  创建目录 
    hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件 
    hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS 
    hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地 
    hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致 
    hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致 
    hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1 
    hadoop fs -text  查看文件内容 
    hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位 
    hadoop fs -tail  显示文件末尾 
    hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录 

    hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

    下面的对上面命令的操作演示

    1,hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构

    hdfs文件的相关操作主要使用hadoop fs、hadoop dfs、hdfs dfs 命令,以下对最常用的相关命令进行简要说明。 
    hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构 
    hadoop fs -mkdir  创建目录 
    hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件 
    hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS 
    hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地 
    hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致 
    hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致 
    hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1 
    hadoop fs -text  查看文件内容 
    hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位 
    hadoop fs -tail  显示文件末尾 
    hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录 

    hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

    下面的对上面命令的操作演示

    1,hadoop fs -ls  显示当前目录结构,-ls -R 递归显示目录结构

    2,hadoop fs -mkdir  创建目录

    3,hadoop fs -rm   删除文件,-rm -R 递归删除目录和文件

    4,hadoop fs -put  [localsrc] [dst]  从本地加载文件到HDFS

    5,hadoop fs -get  [dst] [localsrc]  从HDFS导出文件到本地

    6,hadoop fs - copyFromLocal [localsrc] [dst]  从本地加载文件到HDFS,与put一致

    7,hadoop fs -copyToLocal [dst] [localsrc]  从HDFS导出文件到本地,与get一致

    8,hadoop fs -test -e  检测目录和文件是否存在,存在返回值$?为0,不存在返回1

    9,hadoop fs -text  查看文件内容

    10,hadoop fs -du  统计目录下各文件大小,单位字节。-du -s 汇总目录下文件大小,-du -h 显示单位

    11,hadoop fs -tail  显示文件末尾

    12,hadoop fs -cp [src] [dst] 从源目录复制文件到目标目录

    13,hadoop fs -mv [src] [dst] 从源目录移动文件到目标目录

  • 相关阅读:
    1-27 awk 基本使用
    计算机网络(一)带宽
    CRC检错技术原理
    Wireshark漫谈(一)
    SQL字符串拼接
    MySQL学习笔记(二)
    MySQL学习笔记(一)
    Java 反射机制(二)
    Java 反射机制(一)
    Windows使用MySQL数据库管理系统中文乱码问题
  • 原文地址:https://www.cnblogs.com/xiaojianblogs/p/14281445.html
Copyright © 2011-2022 走看看