zoukankan      html  css  js  c++  java
  • hadoop学习

    hadoop:http://www.linuxidc.com/Linux/2015-08/121463.htm

    hadoop——ssh配置:hadoop中的ssh无密码登录配置  http://blog.csdn.net/qiuchenl/article/details/7999044

    60款与Hadoop和大数据相关的顶级开源工具---  http://www.linuxidc.com/Linux/2015-08/121463p2.htm

    apt-get

    http://www.cnblogs.com/skyme/archive/2011/10/26/2223984.html

    http://www.cnblogs.com/tankaixiong/p/4182560.html

    http://blog.csdn.net/z363115269/article/details/38776163

    http://blog.csdn.net/lzslywl/article/details/24379717

    http://blog.sina.com.cn/s/blog_a94476040101cb2t.html

    学习hadoop安装参考:

    http://blog.sina.com.cn/s/blog_a94476040101cb2t.html

    linux系统安装yum环境
    
    1、卸载rhel的默认安装的yum包
    查看yum包
    rpm -qa|grep yum
    卸载之
    rpm -qa|grep yum|xargs rpm -e --nodeps
    
    2、下载新的yum包
    64位linux系统下载安装包
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/yum-metadata-parser-1.1.2-4.el5.x86_64.rpm
    32位linux系统下载安装包
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm
    wget http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/yum-metadata-parser-1.1.2-4.el5.i386.rpm
    
    注意:安装包可能会升级,最后的文件名可以通过最新路径下查看得到,例如:
    http://centos.ustc.edu.cn/centos/5/os/x86_64/CentOS/
    http://centos.ustc.edu.cn/centos/5/os/i386/CentOS/
    
    然后进行安装
    rpm -ivh yum-*
    注意:yum和yum-fastestmirror相互依赖,所以同时安装即可。
    3、下载yum的配置源
    wget http://docs.linuxtone.org/soft/lemp/CentOS-Base.repo 下载到 /etc/yum.repos.d/ 目录下面
    
    4、运行yum makecache生成缓存
    JAVA版本与hadoop关系 
    
    1.卸载老版本java
      rpm -qa|grep jdk
      rpm -e *****
      rm -rf /usr/java
     
    2.安装新版本
      注释:
      a)经验证,java 1.7.** ,在执行map/reduce方法时会一直停留在 map 0% ,reduce 0%状态,
        查看日志,会有134,258等信息错误。(与hadoop 0.2.*版本冲突,网上有详细信息)
      b)java 1.6.0.31会在启动hadoop时导致jobtracker,tasktracker进程无法启动;(与hadoop 1.0.1冲突)
      c)java 1.6.0.30当前验证比较好;
      d)以上java版本均下自oracle网站.
     
    3. 配置JAVA环境变量
      vi /etc/profile 
      source /etc/profile
    mac 安装
    mac ssh 工具, SecureCRT 7.0.2 for mac完美破解版
    http://download.csdn.net/download/guolichun/7733069
    go的文件上传,客户端文件上传
    
    http://studygolang.com/articles/2472
  • 相关阅读:
    C++各大有名库的介绍——网络通信
    C++名人的网站
    C++各大有名库的介绍——序列化
    C++各大有名库的介绍——字符串
    C++各大有名库的介绍——游戏开发
    C++各大有名库的介绍——其他库
    C++各大有名库的介绍——综合
    java hashcode写法
    vs 在线引用
    eclipse去掉拼写检查
  • 原文地址:https://www.cnblogs.com/8899man/p/5117390.html
Copyright © 2011-2022 走看看