zoukankan      html  css  js  c++  java
  • 配置MapReduce时遇到的问题记录

    1、左边栏的Project Explorer里一直不出现DFS Locations.

      发现在把hadoop-eclipse-plugin-2.6.0.jar放到eclipse下的pluins文件夹下并且eclipse -clean之后依旧不显示,后来找到问题所在。

      在Linux虚拟机里换了新的Eclipse,又重新配置MapReduce。

      这次再把hadoop-eclipse-plugin-2.6.0.jar放到eclipse下的pluins文件夹下并且eclipse -clean之后,DFS Locations出现了。

      究其原因是因为:eclipse的众多版本里有的不适合配置Map/Reduce,个别版本功能简单方便实用但也正是因此导致不好配置。

      

    2、配置:

      在window-》preferences-》Hadoop Map/Reduce下配置hadoop路径:

      

      配置完成,则可以在eclipse的开发模式里看到这个小象图标的Map/Reduce模式:

      

      在出现的服务右击后的页面里,按照默认的常规和自己本地的配置文件的路径和内容填写:

      

    3、在配置好MapReduce的路径和常规之后,将端口与hadoop配置的一致,之后能正常显示hdfs下的文件了。

      

     4、记录一下dfs location连接的错误:

      

      这个是连接问题,配置里出现了问题(没有把那些参数的值和自己的hadoop配置时修改的值保持一致)

      

      还有一个是hadoop版本和hadoop-eclipse-plugin-2.6.0.jar这个插件的版本不匹配,也会报一个错

  • 相关阅读:
    数据结构之栈和队列
    数据结构之线性表
    关于优惠券优惠的思路以及实践
    mysql基础知识扫盲
    rabbitMQ第五篇:Spring集成RabbitMQ
    rabbitMQ第四篇:远程调用
    rabbitMQ第三篇:采用不同的交换机规则
    rabbitMQ第二篇:java简单的实现RabbitMQ
    rabbitMQ第一篇:rabbitMQ的安装和配置
    java容器详细解析
  • 原文地址:https://www.cnblogs.com/guobin-/p/9979458.html
Copyright © 2011-2022 走看看