zoukankan      html  css  js  c++  java
  • 如何进行Hadoop二次开发指导视频下载

    本视频适合对Java有一定了解,熟悉java se的Hadoop爱好者,想对Hadoop进行二次开发。下面是以伪分布为例:

    想对Hadoop二次开发:
    一.首先需要Hadoop和Java之间搭建Eclipse搭建一个桥梁,也就是所谓的插件。
    这个插件是由Hadoop来提供的。只要安装Hadoop,就可以在Hadoop安装目录中找到Hadoop-xx-eclipse-pligin.jar。
    <ignore_js_op>


    图1
    二.把这个插件添加到Eclipse安装目录的插件文件夹
    <ignore_js_op>


    图2
    在复制的过程中注意权限问题
    三.复制完成之后,需要重启Eclipse。然后定位Hadoop安装目录。
    <ignore_js_op>


    图3
    (1)选择Hadoop安装目录
    <ignore_js_op>



    图4
    四.调出map/reduce location信息窗口

    (1)通过如下操作添加map/reduce视图
    <ignore_js_op>



    图5
    <ignore_js_op>



    图6
    (2)通过图7,图8操作显示map/reduce location信息窗口
    <ignore_js_op>


    图7
    <ignore_js_op>


    图8
    <ignore_js_op>



    图9
    图9就可以看到map/reduce location信息窗口

    五连接Hadoop
    这一步主要配置开发那一台机器的Hadoop。通过new hadoop location,弹出信息配置窗口。
    这里需要注意的是,对于伪分布这里填写的location,远程的需要填写ip,端口的配置要与map-site一致,否则会出错。

    图10

    <ignore_js_op>


    图11
    <ignore_js_op>



    图12

    <ignore_js_op>



    图13<ignore_js_op>


    图14
    六连接成功
    连接则会出现图15所示
    <ignore_js_op>

    x12.png (9.48 KB, 下载次数: 0)

    图15

    视频下载地址:

    http://www.aboutyun.com/thread-6496-1-1.html

  • 相关阅读:
    singleton 单例模式
    try catch finall 结构里的 return
    ConcurrentHashMap
    ConcurrentHashMap原理分析
    Java 实现两个整数变量的交换
    Java reflect 反射 3 Class.forname
    Java reflect 反射 2
    Java reflect 反射 1
    java class load 类加载
    HashMap源码解析
  • 原文地址:https://www.cnblogs.com/yunkaifa/p/3515606.html
Copyright © 2011-2022 走看看