zoukankan      html  css  js  c++  java
  • hadoop独立模式

    参考博客:http://my.oschina.net/winHerson/blog/121963

    eclipse远程调试:http://zhangjie.me/eclipse-debug-hadoop/

    百度文档:http://wenku.baidu.com/link?url=13x1F92KXZt4Q2iLKfsu-kgRq64Nx-bKNM2eMV7wnxss2Rd1Al7XXRuDiEETpCuaOKC9E3_Wk_xTQt6qkP7P_9AoQE9M6aTx_ZNnVfUyw1W

    1.独立模式:

    独立模式下hadoop使用本地的文件系统而非分布式文件系统,而且其也不会启动任何守护进程,Map和Reduce任务作为同一个进程的不同部分来执行。因此,本地模式下的hadoop仅运作于本机。

    2.伪分布式模式

     hadoop 将所有进程运行于同一台主机上,但此时Hadoop将使用分布式文件系统,而且各jobs也是由JobTracker服务管理的独立进程。同时,由于伪分 布式的Hadoop集群只有一个节点,因此HDFS的块复制将限制为单个副本,其secondary-master和slave也都将运行于本地主机。此 种模式除了并非真正意义的分布式之外,其程序执行逻辑完全类似于完全分布式,因此,常用于开发人员测试程序执行。

  • 相关阅读:
    underscorejs
    使用CORS:跨域两三事
    line-height的小技巧
    深入探讨ES6生成器
    ES6生成器基础
    响应式网页
    javascript代码复用(四)-混入、借用方法和绑定
    javascript代码复用模式(三)
    javascript代码复用模式(二)
    jQuery基础事件
  • 原文地址:https://www.cnblogs.com/middlesummer/p/3771984.html
Copyright © 2011-2022 走看看