zoukankan      html  css  js  c++  java
  • Hadoop eclipse plugin

    我的eclipse是在win7上,hadoop在win7里的虚拟机里的ubuntu上,为了方便起见,想在eclipse上安装hadoop的插件,主要参考 https://my.oschina.net/muou/blog/408543,上面写得蛮详细的,对于里面提到的问题二,提供下载的 hadoop.dll 不适用于 hadoop2.6,需要使用 http://www.cnblogs.com/longshiyVip/p/4805418.html 这里提供的hadoop.dll。对于提到的问题四,按照其所说的修改配置,但是我的电脑上不起作用。有两种解决方法:

      1. 直接修改目录的访问权限为777,就解决了。但是查看HDFS系统时,会发现生成文件的用户是Administrator(我的win7的登陆用户)

      2. 在运行时,在 VM arguments里加上 -DHADOOP_USER_NAME=shj (shj是HDFS文件系统里的某个用户名)

    配置完后,出现在上面所写的问题一,按照他所说的创建目录后,eclipse里的 DFS Locations 里面依旧显示Connection Refused。找到了官方文档: https://wiki.apache.org/hadoop/ConnectionRefused, 可是也只是提供检查步骤,并没有给解决方法。试了一下上面提到的第5点。我win7上的确telnet不到hadoop的9000端口。后来把 core-site.xml 中的 localhost:9000 改成 ubuntu 虚拟机的实际IP地址后,问题解决。原因应该是我的eclipse是在win7上的,hadoop的环境是在win7里的虚拟机上的,并不是cywin里。

    <configuration>
            <property>
                    <name>fs.defaultFS</name>
                    <value>hdfs://192.168.56.101:9000</value> <!-- 不要写 localhost -->
            </property>
    </configuration>

  • 相关阅读:
    Educational Codeforces Round 80 (Rated for Div. 2)
    寒假集训
    HDU-4609 3-idiots
    部分分式展开法
    线性同余方程组
    爬取哔哩哔哩python搜索结果
    数据可视化练习题
    python正则表达式
    git的安装和基础知识
    python学习计划
  • 原文地址:https://www.cnblogs.com/langfanyun/p/6079334.html
Copyright © 2011-2022 走看看