zoukankan      html  css  js  c++  java
  • 单机伪分布集群搭建

    单机伪分布:用一个节点模拟集群
    好处:方便测试,开发,占用资源小
    搭建方法:
    第一步:修改slaves文件,将master(主机名)写入文件中。
    第二步:修改hdfs-site.xml文件,将文件的副本数改成1(副本数小于等于节点数)。

    <property>
            <name>replication</name>
            <value>1</value>
    </property>


    -----------
    格式化之前将/tmp/hadoop-root删除,(如果自己配置的自己找到data name进行删除,如果没有直接删除Hadoop-root)
    rm -rf /tmp/hadoop-root
    第三步:格式化  Hadoop namenode –format
    第四步:启动  start-dfs.sh
    第五步:测试-上传文件到Hadoop集群
    hadoop fs -put /将要上传的文件  /集群的文件目录

    如果上传文件或者创建目录,出现在安全模式状态,

    可以等待其自动退出安全模式,也可以使用手动命令来离开安全模式: 
    hadoop dfsadmin -safemode leave 

  • 相关阅读:
    函数式编程
    高级特性
    ZooKeeper介绍
    perl 退出函数问题
    perl 处理 回车 换行符
    定义函数
    调用函数
    python 字典
    python 条件判断
    列表和数组
  • 原文地址:https://www.cnblogs.com/pigdata/p/10305607.html
Copyright © 2011-2022 走看看