zoukankan      html  css  js  c++  java
  • 【Hadoop开发环境搭建】二、Hadoop安装与配置

    在上篇中介绍了Linux环境下JDK的安装与环境配置,本篇记录了Hadoop的安装配置过程

    二、Hadoop安装与配置

    1.现有工具及文件

    ①Xmanager Enterprise 5(其中的Xftp可用于实现不同IP地址间文件的互传,也可以实现Linux文件目录的可视化)

    ②hadoop-2.7.7.tar.gz

    ③云服务器(配置Linux操作系统)

    ④已配置好JDK1.8

    2.解压Hadoop安装包到根目录文件

        在根目录创建名为hadoop的文件夹

    mkdir /hadoop

        通过Xftp将安装包存放于hadoop文件夹内,执行解压命令

    tar -zxvf hadoop-2.7.7.tar.gz

        进入hadoop目录下,创建数据存放的文件夹

    mkdir tmp hdfs hdfs/data hdfs/name
    

    3.修改配置文件,配置环境变量

        进入   /hadoop/hadoop-2.7.7/etc/hadoop    目录

        (1) 修改hadoop-env.sh 文件

    vi hadoop-env.sh

        找到配置jdk环境的位置,修改如下:

        (2)修改yarn-env.sh 文件

    vi yarn-env.sh

        找到文件末尾(G),添加变量如下

       

        (3)配置环境变量

    vi /etc/profile

    在上篇文章的环境变量基础上添加:

    export HADOOP_HOME=/hadoop/hadoop-2.7.7

    在PATH后面添加:

    :$HADOOP_HOME/bin:$HADOOP_HOME/sbin

    4.检验安装成功

    下一篇将介绍Hadoop集群的搭建过程

    人生的奔跑不在于瞬间的爆发,而在于途中的坚持。
  • 相关阅读:
    Openresty+redis实现灰度发布
    Nginx keepalived
    Nginx反向代理、负载均衡、动静分离、缓存、压缩、防盗链、跨域访问
    MYCAT扩容
    MYCAT全局序列
    MYCAT分库分表
    MySQL主从复制
    [redis] linux下集群篇(4) docker部署
    [nginx] CORS配置多域名
    [mysql] 归档工具pt-archiver,binlog格式由mixed变成row
  • 原文地址:https://www.cnblogs.com/Nelsonblog/p/11787349.html
Copyright © 2011-2022 走看看