zoukankan      html  css  js  c++  java
  • Hadoop初体验

    1.首先准备环境

    系统:Linux(centOS)

    jdk:1.7

    这里jdk要安装配置完成,具体步骤参考:Linux环境下安装JDK

    注意本次没有配置免密登录,所以在启动和停止的时候回让你输入多次密码!!!

    2.下载安装包

    官网地址:
    https://hadoop.apache.org/


    选择版本:

    下载地址:
    http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz

    在Linux服务器上直接执行

    wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz

    解压安装包

    tar zxvf hadoop-2.7.7.tar.gz

    移动解压后的文件夹hadoop-2.7.7到usr目录下创建的hadoop文件夹下:

    mv ./hadoop-2.7.7 /usr/hadoop/

    编辑文件

    1./usr/hadoop/hadoop-2.7.7/etc/hadoop/hadoop-env.sh

    vim /usr/hadoop/hadoop-2.7.7/etc/hadoop/hadoop-env.sh

    2./usr/hadoop/hadoop-2.7.7/etc/hadoop/core-site.xml

        <!-- 指定HDFS老大(namenode)的通信地址 -->
        <property>
            <name>fs.defaultFS</name>
            <value>hdfs://0.0.0.0:9000</value>
        </property>
        <!-- 指定hadoop运行时产生文件的存储路径 -->
        <property>
            <name>hadoop.tmp.dir</name>
            <value>/home/root/hadoop/temp</value>
        </property>

    3./usr/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml

        <!-- 设置hdfs副本数量 -->
        <property>
            <name>dfs.replication</name>
            <value>2</value>
        </property>

     格式化

    /usr/hadoop/hadoop-2.7.7/bin/hdfs namenode -format

    启动

    /usr/hadoop/hadoop-2.7.7/sbin/start-dfs.sh

    停止

    /usr/hadoop/hadoop-2.7.7/sbin/stop-dfs.sh

     访问地址

    http://IP地址:50070

  • 相关阅读:
    JPA01
    mybatis入门
    PHP 循环- While循环
    PHP超级全局变量
    PHP 数组排序
    PHP数组
    PHP Switch语句
    PHP IF...Else语句
    PHP运算符
    PHP字符串变量
  • 原文地址:https://www.cnblogs.com/zjiacun/p/10408293.html
Copyright © 2011-2022 走看看