zoukankan      html  css  js  c++  java
  • hadoop整合纪要

    版本:hadoop-1.1.1,hbase-0.94.3,hive-0.9.0

    一. 版本兼容
    1. hadoop-1.1.1与hbase-0.94.3
    $HADOOP_HOME/hadoop-core-*.*.*.jar和$HADOOP_HOME/lib/commons-configuration-*.*.jar拷贝到$HBASE_HOME/lib目录下,删除$HBASE_HOME/lib目录下的hadoop-core-*.jar,避免版本冲突和不兼容。

    2. hbase-0.94.3和hive-0.9.0
    $HIVE_HOME/lib/hbase-0.92.0.jar和$HIVE_HOME/lib/hbase-0.92.0-tests.jar删除掉,$HBASE_HOME/hbase-0.94.3.jar和$HBASE_HOME/hbase-0.94.3-tests.jar拷贝到$HIVE_HOME/lib/目录下,避免版本冲突和不兼容。

    二. 整合所需jar
    1. Hive和HBase整合所需jar
    $HBASE_HOME/lib目录下所有的 jar 包、$HADOOP_HOME/hadoop-core-1.1.1.jar、$HADOOP_HOME/lib/hive*和$HADOOP_HOME/lib/libfb303.jar以及MySQL的JDBC驱动包(mysql-connector-java-5.0.4-bin.jar)添加到工程的Classpath 下。

  • 相关阅读:
    Bash's Big Day
    树链剖分求lca
    Contest1814
    启发式合并
    2019 Multi-University Training Contest 10
    图论题
    vijos-记数问题
    2018届研究生招生预推免(THU,HIT)经历分享
    数细胞-swust oj
    Bone Collector-HDU
  • 原文地址:https://www.cnblogs.com/linjiqin/p/2947497.html
Copyright © 2011-2022 走看看