zoukankan      html  css  js  c++  java
  • Hadoop MapReduce 运行步骤

    步骤:
    【使用java编译程序,生成.class文件】

    【将.class文件打包为jar包】

    【运行jar包(需要启动Hadoop)】

    【查看结果】

    具体实现:
    1.添加程序所需要的依赖
    vim ~/.bashrc
    export HADOOP_HOME=/usr/local2/hadoop
    export CLASSPATH=$($HADOOP_HOME/bin/hadoop classpath):$CLASSPATH
    source ~/.bashrc
    2.javac WordCount.java         (生成.class文件)
    3.jar -cvf WordCount.jar ./WordCount*.class   (.class 文件打包成 jar,才能在 Hadoop 中运行)
    4.运行程序:
    hadoop jar WordCount.jar WordCount /user2/hive2/6.txt /soyo_output        (/user2/hive2/6.txt:输入文件,soyo_output:结果文件,文件都在HDFS上)
    5.查看结果:

    hdfs dfs -ls /

  • 相关阅读:
    C#基础
    进制转换
    养猪和存储空间
    独热码和二进制码
    mux_xz
    饮料机
    亚稳态
    mos管功耗
    功能覆盖率和代码覆盖率
    时序逻辑电路输出特点
  • 原文地址:https://www.cnblogs.com/soyo/p/8005508.html
Copyright © 2011-2022 走看看