zoukankan      html  css  js  c++  java
  • [原创]全分布模式下Hadoop安装

    1. Windows操作系统下安装软件VMware Workstation,并安在此软件中安装三台CentOS系统虚拟机server1, server2,server3, 选择网络连接方式为桥接。server1, server2, server3 IP分别设置为192.168.1.201192.168.1.202192.168.1.203

     

     [原创]全分布模式下 <wbr>Hadoop <wbr>安装


    添加帐号admin 

     [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    修改密码
    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    生成 ssh key

     [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

    复制公钥

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    将三台机器的公钥都复制到authorized_keys中,并在三台机器中的.ssh 文件夹中都保存一份

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    测试server1server2server3相互之间可以免密码用ssh登录

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

    下载并安装JDK

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    配置Java环境变量

     [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

    server1中下载hadoop

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    解压hadoop并移动到/home/admin目录

      

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    配置 hadoop-env.sh

     

      [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    修改masters

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    修改slaves

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    NameNodeDataNode建立文件夹

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    配置 hdfs-site.xml

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

    配置core-site.xml 

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

     

    配置 mapred-site.xml

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    向节点server2server3复制hadoop

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

     

    格式化hdfs

      [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

     

    启动hadoop

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    查看进程状态

    server1

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    server2

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装 

     

    server3

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

    配置成功,查看浏览器

    50070端口

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    50030端口

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装

     

    [原创]全分布模式下 <wbr>Hadoop <wbr>安装
  • 相关阅读:
    二十一、Mysql之GTID
    二十、Mysql的过滤复制
    十九、Mysql的半同步复制
    十八、Mysql之延时从库
    十七、Mysql的主从(三)--主从故障监控分析
    抖音爬虫
    python 操作手机
    python sheet写入数据
    pandas用法大全
    caog
  • 原文地址:https://www.cnblogs.com/leeeee/p/7276671.html
Copyright © 2011-2022 走看看