zoukankan      html  css  js  c++  java
  • 熟悉常用的HDFS操作

    一、Hadoop提供的Shell命令完成相同任务:

      1、在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件txt,里面可以随意输入一些单词.

      2、在本地查看文件位置(ls)

      3、在本地显示文件内容

    1
    2
    3
    cd /usr/local/hadoop
    touch test.txt
    cat test.txt

      

    4、使用命令把本地文件系统中的“txt”上传到HDFS中的当前用户目录的input目录下。

    1
    2
    3
    4
    ./sbin/start-dfs.sh
    ./bin/hdfs dfs -mkdir -/home
    ./bin/hdfs dfs -mkdir input
    ./bin/hdfs dfs -put ./test.txt input

      

    5、查看hdfs中的文件(-ls)

    1
    2
    ./bin/hdfs dfs -ls   
    ./bin/hdfs dfs -ls input

      

    6、显示hdfs中该的文件内容

    1
    ./bin/hdfs dfs -cat input/test.txt

      

    7、删除本地的txt文件并查看目录

    1
    ./bin/hdfs dfs -rm -ls input/test.txt

      

    8、从hdfs中将txt下载地本地原来的位置。

    1
    ./bin/hdfs dfs -get input/test.txt ~/test.txt

      

    9、从hdfs中删除txt并查看目录

    1
    ./bin/hdfs dfs -rm -ls input/test.txt
  • 相关阅读:
    触发事件trigger
    淘宝天猫关键词SEO优化
    Linux下升级python
    python3多线程趣味详解
    python之selenium
    1kkk
    python之lxml(xpath)
    python中时间日期格式化符号
    唯品会数据采集-异步瀑布流
    python数据库操作pymysql
  • 原文地址:https://www.cnblogs.com/xung/p/8964564.html
Copyright © 2011-2022 走看看