zoukankan      html  css  js  c++  java
  • hadoop集群中动态添加新的DataNode节点

    集群中现有的计算能力不足,须要另外加入新的节点时,使用例如以下方法就能动态添加新的节点:

    1、在新的节点上安装hadoop程序,一定要控制好版本号,能够从集群上其它机器cp一份改动也行

    2、把namenode的相关配置文件拷贝到该节点

    3、改动masters和slavers文件,添加节点

    4、设置ssh免password登录该节点

    5、单独启动该节点上的datanode和tasktracker守护进程。启动命令例如以下:

    hadoop -daemon.sh start datanode asktracker

    6、下次操作hdfs时。就可将数据写到该机器上,假设想使得节点间的负载均衡。可使用一下命令:

    start-balancer.sh ,备注:负载均衡视集群规模大小耗时,假设正在执行较重的任务或者任务队列等待任务较多时不宜使用。

    以上命令均在/hadoop/bin 文件夹下运行。

  • 相关阅读:
    UVALive4727:jump
    UVALive
    UVA11795 Mega Man's Mission
    UVA4731:Cellular Network
    UVA11404:Palindromic Subsequence
    设计思路
    阅读计划
    上课未完成代码原因
    《人月神话》读后感
    《软件工程》第十一章总结
  • 原文地址:https://www.cnblogs.com/llguanli/p/7069740.html
Copyright © 2011-2022 走看看