zoukankan      html  css  js  c++  java
  • hadoop local、伪分布 模式

    local模式:
    把安装包 解压到 /usr/local  下 
    [hadoop@master local]$ sudo tar -zxvf hadoop-2.7.3.tar.gz 
     
    创建一个软连接
    [hadoop@master local]$ sudo ln -s hadoop-2.7.3 hadoop
     
    增加环境变量
    [hadoop@master local]$ vi ~/.bash_profile 
    增加
    export JAVA_HOME=/usr/
    export HADOOP_HOME=/usr/local/hadoop
    export PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
    生效
    [hadoop@master local]$ source ~/.bash_profile 
     
    改变程序宿主
    [hadoop@master local]$ sudo chown -R hadoop:hadoop hadoop-2.7.3

    使用一个hadoop命令,效果等同于  ls /
    [hadoop@master hadoop]$ hadoop fs -ls /
     
     
    使用mapreduce 运行一个程序(统计一个文件中的 单词数)
    [hadoop@master out]$ mkdir input
    [hadoop@master out]$ vi input/test.txt
    [hadoop@master out]$ hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar  wordcount ./input ./out
     
    ……
     
    [hadoop@master out]$ cd out/
    [hadoop@master out]$ cat part-r-00000 
    21e     1
    23      1
    2f      1
    adg     1
    asdfs   1
    by4hrthf        1
    gdxzg   1
     
     
     
     
     
     
    伪分布模式:
  • 相关阅读:
    前端知识体系(一)浏览器机制以及进程线程的关系
    页面之间的通信
    DOM
    浏览器内核及浏览器对象
    js正则表达式
    setTimeout和setInterval
    原生js操作cookie
    apply、call、bind方法调用
    一个简单的hexo搭建博客网站的故事
    debug for bin runtime error
  • 原文地址:https://www.cnblogs.com/centos2017/p/7896735.html
Copyright © 2011-2022 走看看