zoukankan      html  css  js  c++  java
  • Hadoop集群(第3期)机器信息分布表

    1、分布式环境搭建

      采用4台安装Linux环境的机器来构建一个小规模的分布式集群。

    图1 集群的架构

      其中有一台机器是Master节点,即名称节点,另外三台是Slaver节点,即数据节点。这四台机器彼此间通过路由器相连,从而实验相互通信以及数据传输。它们都可以通过路由器访问Internet,实验网页文档的采集。

    2、集群机器详细信息

    2.1 Master服务器

    名称

    详细信息

    机器名称

    Master.Hadoop

    机器IP地址

    192.168.1.21

    最高用户名称(Name

    root

    最用用户密码(PWD

    hadoop(全小写)

    一般用户名称(Name

    hadoop(全小写)

    一般用户密码(PWD

    hadoop(全小写)

    2.2 Slave1服务器

    名称

    详细信息

    机器名称

    Slave1.Hadoop

    机器IP地址

    192.168.1.22

    最高用户名称(Name

    root

    最用用户密码(PWD

    hadoop(全小写)

    一般用户名称(Name

    hadoop(全小写)

    一般用户密码(PWD

    hadoop(全小写)

    2.3 Slave2服务器

    名称

    详细信息

    机器名称

    Slave2.Hadoop

    机器IP地址

    192.168.1.23

    最高用户名称(Name

    root

    最用用户密码(PWD

    hadoop(全小写)

    一般用户名称(Name

    hadoop(全小写)

    一般用户密码(PWD

    hadoop(全小写)

    2.4 Slave3服务器

    名称

    详细信息

    机器名称

    Slave3.Hadoop

    机器IP地址

    192.168.1.24

    最高用户名称(Name

    root

    最用用户密码(PWD

    hadoop(全小写)

    一般用户名称(Name

    hadoop(全小写)

    一般用户密码(PWD

    hadoop(全小写)

      备注:

          添加新用户命令:useradd;修改新用户密码:passwd 用户名

          退出当前用户:exit;         登录root用户:su  root

    3、集群机器实际布局

      下面是几张Hadoop集群实际机器的部署情况,可以从图中看到那时的我们怎么实际配置Hadoop集群的。

    3.1 Hadoop工作集群

      该Hadoop集群机器是学习和研究之用,上面运行着已经搭建好的的Hadoop平台以及运行着一些实际程序。

    图3.1-1 Hadoop工作集群部署图(1)

     

    图3.1-2 Hadoop工作集群部署图(2)

      上面从两个角度来分别观察Hadoop集群部署,作为Hadoop集群的Master节点,用的是机器较为的 而三台Slave机器则是比较差劲的机器,用一个小路由器他们组成了一个局域网。

    图3.1-3 路由器特写

    3.2 Hadoop实验集群

      为了方便新成员练习Hadoop技术,又防止在实际Hadoop集群上破坏已运行的程序,故另外弄了两台旧Lenovo电脑组成:一个"主——TMaster";一个"辅——TSlave"。

    图3.2-1 Hadoop集群部署

      上面就是Hadoop集群的样子,虽然很简陋,但足够学习用了。如果你的经费实在紧张的话,请采用虚拟机,这是很好的选择,因为我也是这样弄得。不过感叹一下linux下连个qq都装不了,看来他只适合工作,不适合娱乐。

  • 相关阅读:
    Eclipse下安装Pydev以及Helloworld实例 分类: Python 2015-07-23 23:30 29人阅读 评论(0) 收藏
    Eclipse下安装Pydev以及Helloworld实例
    Selenium学习笔记之013:控制滚动条到底部
    iOS开发Embedded dylibs/frameworks are only supported on iOS 8.0 and later for architecture armv7的解决方法
    UIView 和 CALayer 的区别和联系。
    iOS 防止数组越界的解决方法
    iOS中集成ijkplayer视频直播框架
    解析数据时,快速查看当前需要创建的数据模型的所有属性,不用每个都写,直接打印粘贴
    iOS开发中,能够方便使用的Xcode插件
    UIButton图片拉伸方法(很多需要按钮的地方我们只需要一张小图来进行缩放)
  • 原文地址:https://www.cnblogs.com/jack-Star/p/4084288.html
Copyright © 2011-2022 走看看