zoukankan      html  css  js  c++  java
  • Win7 Eclipse Hadoop2.4插件配置

    准备工作:
         1、下载hadoop2x-eclipse-plugin-master.zip
                Github地址:https://github.com/winghc/hadoop2x-eclipse-plugin
                百度网盘地址:http://www.pan1234.com/result.jsp?wp=0&op=0&ty=gn&q=hadoop2x-eclipse-plugin
                去自己360云盘备份软件中下载。
         2、WinSCP将Hadoop-2.4.0主文件夹复制到Win7系统中
         3、安装ant
              官网地址:http://ant.apache.org/bindownload.cgi
              去自己360云盘备份软件中下载。
              本次下载apache-ant-1.9.6-bin.zip,解压后配置环境变量即可
              

    配置步骤:
    此处需要指定eclipse路径和hadoop路径是为了生成插件配置信息的对应?插件生成后是否可以通用?有待测试
    1、进入解压后的hadoop2x-eclipse-plugin-mastersrccontribeclipse-plugin目录中
    2、运行命令: ant jar -Dversion=2.4.0 -Declipse.home=C:Program Files (x86)eclipse -Dhadoop.home=D:StudyAndWorkhadoop-2.4.0
    3、过程会在此处卡住:
         
    4、终止该过程进行修改,进入hadoop2x-eclipse-plugin-master/src/contrib/eclipse-plugin目录下,修改build.xml文件,
         
         修改为:
         
    然后重新ant命令
    5、编译过程中会出现如下错误:
         
    进入该目录,
    所以将build.xml中对应位置改为对应版本号即可跳过该错误,其他类似错误以此处理。
    其中有个错误
    没有找到对应的htrace-core.jar包,直接在build.xml中删除相关信息
    6、编译成功
         
    去找到对应的插件包
    7、放入eclipse安装路径下的plugins文件夹中,重启ecplise.

    将此插件放到/usr/local/eclipse/pugins目录下,重新启动eclipse

    Window ->prefrences->Hadoop MapReduce 找到对应的Hadoop安装路径.

    Window -> Show View -> Other...

    打卡之后,选择MapReduce,会弹出来一个黄色的图标,双击,会发现eclipse的下面变成这样



    然后单击右边的蓝色小象,出现


    上面的端口是我的伪集群分布的配置,MapReduceV2端口号默认,DFS端口号改为9000,即core-site.xml中的配置弄好之后点击finish就可以了

    然后新建一个项目,File -> Project -> MapReduce Project 出现下图


    点击Configure Hadoop install directory设置安装的hadoop安装目录。之后,Project的左边如图所示



    至此,大功告成。我们可以用WordCount测试一下,在hadoop/src里面添加WordCount.java文件。在文件空白出单击右键,Run As -> Run Configuration

    注意,左边的小框选择Java Application,之后弹出右边的框。然后选择第二个Arguments,在上面第一个框里面设置输入目录 和 输出目录。点击Apply.



  • 相关阅读:
    vue学习记录(四)---router的运用
    node.js 框架express关于报错页面的配置
    node.js 的热更新
    yii2 Menu组件的使用
    node.js 框架express有关于router的运用
    node.js 的页面渲染方法ejs
    什么是mybatis
    如何清除maven中下载失败的包
    hibernate 执行步骤
    什么是ORM
  • 原文地址:https://www.cnblogs.com/wuyida/p/6300262.html
Copyright © 2011-2022 走看看