zoukankan      html  css  js  c++  java
  • hadoop本地模式

    一、官方Grep案例

    1.1、在hadoop的安装目录下面创建一个input文件夹

    mkdir input

    1.2、将etc/hadoop目录下面的xml配置文件复制到input文件夹中

    cp etc/hadoop/*.xml  input

    1.3、执行share目录下的MapReduce程序

    hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.4.jar grep input/ output 'dfs[a-z.]+'

    该命令是查询input目录下面的文件中包含dfs的字符串的个数。

    注意:这里的输出路径output不能存在,否则会报错。

    1.4、执行结果

     二、官方WordCount案例

    2.1、在hadoop的安装目录下面创建一个wcinput文件夹

    mkdir wcinput

    2.2、在wcinput文件下创建一个wc.input文件

    cd wcinput
    touch wc.input

    2.3、编辑wc.input文件

    hadoop yarn
    hadoop mapreduce
    atguigu
    atguigu

    2.4、回到hadoop的安装目录,执行程序

    hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.4.jar wordcount  wcinput wcoutput

    2.5、执行结果

  • 相关阅读:
    君の名は~ 观后感
    dp1,明天补题解
    【bzoj1222】[HNOI2001]产品加工
    Daily~Miracles
    luogu 1273有线电视网
    luogu 1373
    codeforces 721C
    codeforces 706E
    The~Best~Chanteur~宇多田ヒカル
    codeforces706D
  • 原文地址:https://www.cnblogs.com/cq-yangzhou/p/14341141.html
Copyright © 2011-2022 走看看