zoukankan      html  css  js  c++  java
  • Hadoop MapReduce 运行步骤

    步骤:
    【使用java编译程序,生成.class文件】

    【将.class文件打包为jar包】

    【运行jar包(需要启动Hadoop)】

    【查看结果】

    具体实现:
    1.添加程序所需要的依赖
    vim ~/.bashrc
    export HADOOP_HOME=/usr/local2/hadoop
    export CLASSPATH=$($HADOOP_HOME/bin/hadoop classpath):$CLASSPATH
    source ~/.bashrc
    2.javac WordCount.java         (生成.class文件)
    3.jar -cvf WordCount.jar ./WordCount*.class   (.class 文件打包成 jar,才能在 Hadoop 中运行)
    4.运行程序:
    hadoop jar WordCount.jar WordCount /user2/hive2/6.txt /soyo_output        (/user2/hive2/6.txt:输入文件,soyo_output:结果文件,文件都在HDFS上)
    5.查看结果:

    hdfs dfs -ls /

  • 相关阅读:
    C++程序设计实验-3
    函数
    C++简单程序设计
    C++程序设计实验-2
    C++程序设计实验-1
    项目总结
    团队测试计划
    第二阶段团队绩效评分
    第二阶段scrum-10
    第二阶段scrum-9
  • 原文地址:https://www.cnblogs.com/soyo/p/8005508.html
Copyright © 2011-2022 走看看