zoukankan      html  css  js  c++  java
  • hadoop2.6.4 搭建单机模式

    注(要先安装jdk,最好jdk版本>=1.7)
    安装jdk  http://www.cnblogs.com/zhangXingSheng/p/6228432.html
     
     
    给普通用户添加suto权限(使用root权限时无需密码)
    1:切换成root用户
    2:编辑 /etc/sudoers 文件(该文件的默认权限为440,所以要修改为640)
    3:在下方位置添加下面变量
    4:保存退出(再将文件权限修改为640),执行 srouce sudoers
     
    =========================================================================================

    1:下载hadoop的框架包(下载链接http://hadoop.apache.org/releases.html)

    2:解压 hadoop-2.6.4.tar.gz   解压命令(tar -xvzf hadoop-2.6.4.tar.gz)
     
    3:将框架包移动到/usr/local/development 目录下(development 是我自己新建的)
    4:修改 /etc/profile 文件,配置hadoop环境变量。修改profile需要root权限
    5:退出保存,使用srouce profile (是配置文件立即生效)
     
    6.编辑etc/hadoop/hadoop-env.sh
     export JAVA_HOME=/usr/local/development/jdk1.7.0_15
     
    6:使用命令:hadoop  ,以下表示配置成功
    =======================================================
    小例子:统计指定目录下的文件单词的个数
    在 /usr/local/development/hadoop-2.6.4/share/hadoop/mapreduce 目录下执行
    hadoop jar /usr/local/development/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.4.jar wordcount /home/zhangxs/data/input /home/zhangxs/data/output
    命令,命令解释(读取/home/zhangxs/data/input目录下所有的文件,计算他们的单词熟,打印到/home/zhangxs/data/outpu    目录下)
     
    成功后会在outinput目录下生成,一下两个文件(_SUCESS表示:成功。part-r-0000文件中记录的是计算后的结果)

     

  • 相关阅读:
    查看网页源代码的方法
    Chrome浏览器清除缓存
    copy与内存管理
    分类(Category)
    @class的使用
    @property参数的
    力扣131题、93题(分割回文串,复原IP地址)
    力扣17题(电话号码的字母组合)
    力扣216(组合总和)
    力扣242题、383题(有效的字母异位词,赎金信)
  • 原文地址:https://www.cnblogs.com/zhangXingSheng/p/6228391.html
Copyright © 2011-2022 走看看