zoukankan      html  css  js  c++  java
  • 1、Hadoop环境搭建

    Hadoop有三种模式:本地模式、伪分布模式、集群模式

    1、本地模式
      1、在/opt下面创建一个software文件

      2、将文件hadoop-2.6.5.tar.gz拷贝到 /opt/software下面

      3、在usr下创建hadoop把hadoop-2.6.5.tar.gz 复制到 /usr/hadoop下

      4、解压hadoop-2.6.5.tar.gz       :tar -zxvf  hadoop-2.6.5.tar.gz

      5、/usr/hadoop/hadoop-2.6.5/etc/hadoop 下面都是配置或者相关的文件

      6、把/usr/hadoop/hadoop-2.6.5/etc/hadoop下的hadoop-env.sh文件第25行的
            export JAVA_HOME=${JAVA_HOME}

            改为 export JAVA_HOME=/usr/lib/jvm/java-1.8.0
    测试
    到/usr/hadoop/hadoop-2.6.5/share/hadoop/mapreduce有一个jar文件
                                 hadoop-mapreduce-examples-2.6.5.jar
    此时需要更改两个文件
    vi /etc/sysconfig/network
                    NTWORKING=yes
           HOSTNAME=virhost01
    vi  /etc/hosts
          192.168.16.128
    重启
    bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.5.jar wordcount wcinput wcoutput
    cat wcoutput/*

  • 相关阅读:
    索引初识
    python数据类型之 元祖、列表字典
    linux常用命令之网络命令
    linux命令之查找find &grep
    python数据类型之可hash,不可hash
    python面向对象之封装,多态与继承
    python之新式类与经典类
    python之random随机函数
    CSS3选择器(一)
    关于居中
  • 原文地址:https://www.cnblogs.com/Tumbler-zeng/p/12618557.html
Copyright © 2011-2022 走看看