zoukankan      html  css  js  c++  java
  • hadoop学习

    hadoop:http://www.linuxidc.com/Linux/2015-08/121463.htm

    hadoop——ssh配置:hadoop中的ssh无密码登录配置  http://blog.csdn.net/qiuchenl/article/details/7999044

    60款与Hadoop和大数据相关的顶级开源工具---  http://www.linuxidc.com/Linux/2015-08/121463p2.htm

    apt-get

    http://www.cnblogs.com/skyme/archive/2011/10/26/2223984.html

    http://www.cnblogs.com/tankaixiong/p/4182560.html

    http://blog.csdn.net/z363115269/article/details/38776163

    http://blog.csdn.net/lzslywl/article/details/24379717

    http://blog.sina.com.cn/s/blog_a94476040101cb2t.html

    学习hadoop安装参考:

    http://blog.sina.com.cn/s/blog_a94476040101cb2t.html

    linux系统安装yum环境
    
    1、卸载rhel的默认安装的yum包
    查看yum包
    rpm -qa|grep yum
    卸载之
    rpm -qa|grep yum|xargs rpm -e --nodeps
    
    2、下载新的yum包
    64位linux系统下载安装包
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-metadata-parser-1.1.2-4.el5.x86_64.rpm
    32位linux系统下载安装包
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-metadata-parser-1.1.2-4.el5.i386.rpm
    
    注意:安装包可能会升级,最后的文件名可以通过最新路径下查看得到,例如:
    http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/
    http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/
    
    然后进行安装
    rpm -ivh yum-*
    注意:yum和yum-fastestmirror相互依赖,所以同时安装即可。
    3、下载yum的配置源
    wget http://docs.linuxtone.org/soft/lemp/CentOS-Base.repo 下载到 /etc/yum.repos.d/ 目录下面
    
    4、运行yum makecache生成缓存
    JAVA版本与hadoop关系 
    
    1.卸载老版本java
      rpm -qa|grep jdk
      rpm -e *****
      rm -rf /usr/java
     
    2.安装新版本
      注释:
      a)经验证,java 1.7.** ,在执行map/reduce方法时会一直停留在 map 0% ,reduce 0%状态,
        查看日志,会有134,258等信息错误。(与hadoop 0.2.*版本冲突,网上有详细信息)
      b)java 1.6.0.31会在启动hadoop时导致jobtracker,tasktracker进程无法启动;(与hadoop 1.0.1冲突)
      c)java 1.6.0.30当前验证比较好;
      d)以上java版本均下自oracle网站.
     
    3. 配置JAVA环境变量
      vi /etc/profile 
      source /etc/profile
    mac 安装
    mac ssh 工具, SecureCRT 7.0.2 for mac完美破解版
    http://download.csdn.net/download/guolichun/7733069
    go的文件上传,客户端文件上传
    
    http://studygolang.com/articles/2472
  • 相关阅读:
    Thrift官方安装手冊(译)
    从用python做zoj1011发生Non-zero Exit Code错误说起
    POJ 1637 Sightseeing tour(最大流)
    js中substr与substring的差别
    白话经典算法系列之七 堆与堆排序
    在基于阿里云serverCentOS6.5下安装Subversion 1.6.5服务
    Android研究之手PullToRefresh(ListView GridView 下拉刷新)使用具体解释
    java中获取系统属性以及环境变量
    sql中 in 、not in 、exists、not exists 使用方法和区别
    80x86汇编小站站长简单介绍-2014年08月23日
  • 原文地址:https://www.cnblogs.com/8899man/p/5117390.html
Copyright © 2011-2022 走看看