zoukankan      html  css  js  c++  java
  • 配置mahout

    构建Mahout要求系统事先安装
    1)JDK 1.6 或更高版本 
    2)Maven 2.0.9 或 2.0.10 
    
    

    Mahout是Hadoop的一种高级应用。运行Mahout需要提前安装好Hadoop。Hadoop的安装网上很多,并不复杂,这里不再讲述,接下来阐述怎么安装Mahout。 1:下载二进制解压安装。 到http://labs.renren.com/apache-mirror/mahout/0.7下载,我选择下载二进制包,直接解压及可。

    hadoop@ubuntu:~$ tar -zxvf mahout-distribution-0.7.tar.gz 


    2:配置环境变量:在/etc/profile,/home/hadoop/.bashrc中添加如下红色信息
    #set java environment
    MAHOUT_HOME=/home/hadoop/mahout-distribution-0.7
    PIG_HOME=/home/hadoop/pig-0.9.2
    HBASE_HOME=/home/hadoop/hbase-0.94.3
    HIVE_HOME=/home/hadoop/hive-0.9.0
    HADOOP_HOME=/home/hadoop/hadoop-1.1.1
    JAVA_HOME=/home/hadoop/jdk1.7.0
    PATH=$JAVA_HOME/bin:$PIG_HOME/bin:
    $MAHOUT_HOME/bin:$HBASE_HOME/bin:$HIVE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/conf:$PATH
    CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$HBASE_HOME/lib:
    $MAHOUT_HOME/lib:$PIG_HOME/lib:$HIVE_HOME/lib:$JAVA_HOME/lib/tools.jar
    export MAHOUT_HOME
    export PIG_HOME
    export HBASE_HOME
    export HADOOP_HOME
    export JAVA_HOME
    export HIVE_HOME
    export PATH
    export CLASSPATH

    如果没有配置 HADOOP_CONF_DIR=/usr/hadoop/conf 还要配置这个
    3:启动hadoop,也可以用伪分布式来测试

    4:mahout --help    #检查Mahout是否安装完好,看是否列出了一些算法
    如: valid program names are:   arff.vector

    canopy

    cat

    cleansvd 等等等等等算法!!!


    5:mahout使用准备
    a.下载一个文件synthetic_control.data,下载地址http://archive.ics.uci.edu/ml/databases/synthetic_control/synthetic_control.data,并把这个文件放在$MAHOUT_HOME目录下。

    b.启动Hadoop:$HADOOP_HOME/bin/start-all.sh

    c.创建测试目录testdata,并把数据导入到这个tastdata目录中(这里的目录的名字只能是testdata)

    hadoop@ubuntu:~/$ hadoop fs -mkdir testdata #
    hadoop@ubuntu:~/$ hadoop fs -put /home/hadoop/mahout-distribution-0.7/synthetic_control.data testdata


    d.使用kmeans算法(这会运行几分钟左右)

    hadoop@ubuntu:~/$ hadoop jar /home/hadoop/mahout-distribution-0.7/mahout-examples-0.7-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job


    e.查看结果

    hadoop@ubuntu:~/$ hadoop fs -lsr output

    如果看到以下结果那么算法运行成功,你的安装也就成功了。
    clusteredPoints  clusters-0  clusters-1  clusters-10  clusters-2  clusters-3  clusters-4 clusters-5  clusters-6  clusters-7  clusters-8  clusters-9  data



  • 相关阅读:
    激活Win Server 2008 R2 Datacenter
    .NET中使用EF6与连接MYSQL
    设计模式(六)——命令模式
    C#爬虫之Senlium
    GitHub入门(一)GIT配置与Hexo博客搭建
    正则表达式
    C#预处理器
    第一次炒花甲
    第一次清蒸鲈鱼
    Python traceback【转】
  • 原文地址:https://www.cnblogs.com/baoendemao/p/3804827.html
Copyright © 2011-2022 走看看