zoukankan      html  css  js  c++  java
  • hadoop本地模式

    一、官方Grep案例

    1.1、在hadoop的安装目录下面创建一个input文件夹

    mkdir input

    1.2、将etc/hadoop目录下面的xml配置文件复制到input文件夹中

    cp etc/hadoop/*.xml  input

    1.3、执行share目录下的MapReduce程序

    hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.4.jar grep input/ output 'dfs[a-z.]+'

    该命令是查询input目录下面的文件中包含dfs的字符串的个数。

    注意:这里的输出路径output不能存在,否则会报错。

    1.4、执行结果

     二、官方WordCount案例

    2.1、在hadoop的安装目录下面创建一个wcinput文件夹

    mkdir wcinput

    2.2、在wcinput文件下创建一个wc.input文件

    cd wcinput
    touch wc.input

    2.3、编辑wc.input文件

    hadoop yarn
    hadoop mapreduce
    atguigu
    atguigu

    2.4、回到hadoop的安装目录,执行程序

    hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.4.jar wordcount  wcinput wcoutput

    2.5、执行结果

  • 相关阅读:
    [loj3364]植物比较
    [loj3366]嘉年华奖券
    [atARC105F]Lights Out on Connected Graph
    [atARC105D]Let's Play Nim
    [atARC058F]Lroha Loves Strings
    [loj3347]有趣的旅途
    [atAGC001F]Wide Swap
    [cf1392I]Kevin and Grid
    [loj3340]命运
    [loj3046]语言
  • 原文地址:https://www.cnblogs.com/cq-yangzhou/p/14341141.html
Copyright © 2011-2022 走看看