zoukankan      html  css  js  c++  java
  • Hadoop初体验

    1.首先准备环境

    系统:Linux(centOS)

    jdk:1.7

    这里jdk要安装配置完成,具体步骤参考:Linux环境下安装JDK

    注意本次没有配置免密登录,所以在启动和停止的时候回让你输入多次密码!!!

    2.下载安装包

    官网地址:
    https://hadoop.apache.org/


    选择版本:

    下载地址:
    http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz

    在Linux服务器上直接执行

    wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz

    解压安装包

    tar zxvf hadoop-2.7.7.tar.gz

    移动解压后的文件夹hadoop-2.7.7到usr目录下创建的hadoop文件夹下:

    mv ./hadoop-2.7.7 /usr/hadoop/

    编辑文件

    1./usr/hadoop/hadoop-2.7.7/etc/hadoop/hadoop-env.sh

    vim /usr/hadoop/hadoop-2.7.7/etc/hadoop/hadoop-env.sh

    2./usr/hadoop/hadoop-2.7.7/etc/hadoop/core-site.xml

        <!-- 指定HDFS老大(namenode)的通信地址 -->
        <property>
            <name>fs.defaultFS</name>
            <value>hdfs://0.0.0.0:9000</value>
        </property>
        <!-- 指定hadoop运行时产生文件的存储路径 -->
        <property>
            <name>hadoop.tmp.dir</name>
            <value>/home/root/hadoop/temp</value>
        </property>

    3./usr/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml

        <!-- 设置hdfs副本数量 -->
        <property>
            <name>dfs.replication</name>
            <value>2</value>
        </property>

     格式化

    /usr/hadoop/hadoop-2.7.7/bin/hdfs namenode -format

    启动

    /usr/hadoop/hadoop-2.7.7/sbin/start-dfs.sh

    停止

    /usr/hadoop/hadoop-2.7.7/sbin/stop-dfs.sh

     访问地址

    http://IP地址:50070

  • 相关阅读:
    《网络攻防实践》6.0
    《网络攻防实践》5.0
    Docker 本地镜像发布到阿里云(完结篇)
    Vue 实战-9 Vue公共js功能函数的封装和使用
    Vue 实战-8 单独运行测试.js文件
    Docker 常用安装
    DockerFile 解析及案例
    Docker 容器数据卷
    Docker 镜像原理
    多字段模糊匹配 -->搜索功能(mysql原生语句实现)
  • 原文地址:https://www.cnblogs.com/zjiacun/p/10408293.html
Copyright © 2011-2022 走看看