zoukankan      html  css  js  c++  java
  • 【Hadoop】Win7上搭建Hadoop开发环境,方法一

    在Win7上,编写hadoop程序

    操作系统:win7

    hadoop版本:CDH3u6

     

    1、下载安装JDK,以及Eclipse

    2、新建JAVA Project

    3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

    4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

        选择“Java Build Path” —— “Libraries” —— Add External Jars

     

    5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

        将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

    6、创建配置文件夹

    7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

     

     

    8、右键->属性 进行如下操作,添加刚刚创建conf文件夹

     

     

    配置搞定!

    写代码的过程中要写入的namenodejobtracker地址(修改为你自己的)

    在你的代码中,加入如下代码就可以了

    Configuration conf = new Configuration();
    conf.set("fs.default.name","192.1.1.2:9000");
    conf.set("mapred.job.tracker","192.1.1.2:9001");

    去博客园浏览:http://www.cnblogs.com/laov/p/3497889.html

     

  • 相关阅读:
    BZOJ 1191 HNOI2006 超级英雄hero
    BZOJ 2442 Usaco2011 Open 修建草坪
    BZOJ 1812 IOI 2005 riv
    OJ 1159 holiday
    BZOJ 1491 NOI 2007 社交网络
    NOIP2014 D1 T3
    BZOJ 2423 HAOI 2010 最长公共子序列
    LCA模板
    NOIP 2015 D1T2信息传递
    数据结构
  • 原文地址:https://www.cnblogs.com/laov/p/3497889.html
Copyright © 2011-2022 走看看