zoukankan      html  css  js  c++  java
  • SparkSQL ThriftServer服务的使用和程序中JDBC的连接

    SparkSQL ThriftServer服务的使用和程序中JDBC的连接

    此时要注意版本问题,我第一次用的是hive2.1.1的,因为要用sparksql的hive服务,但是sparksql默认的是1.2的,在替换了下面四个包之后

    hive-beeline-1.2.1.spark2.jar
    hive-cli-1.2.1.spark2.jar
    hive-exec-1.2.1.spark2.jar
    hive-jdbc-1.2.1.spark2.jar
    hive-metastore-1.2.1.spark2.jar

    依然报错,只好退回hive1.2.1

    在beeline中,如果执行load data 方法 路径执行错误时,beeline不会报错, 即使路径正确,没有返回错误,但是也不会执行.

    在sparkonsql中有的命令依然是不支持的.且有的命令即使错误也不会报错

    然后配置hive-site.xml

    configuration>
      <!-- WARNING!!! This file is auto generated for documentation purposes ONLY! -->
      <!-- WARNING!!! Any changes you make to this file will be ignored by Hive.   -->
      <!-- WARNING!!! You must make your changes in hive-site.xml instead.         -->
      <!-- Hive Execution Parameters -->
    
    <property>  
            <name>javax.jdo.option.ConnectionURL</name>  
            <value>jdbc:mysql://mini1:3306/hive?createDatabaseIfNotExist=true</value>  
        </property>  
        <property>  
            <name>javax.jdo.option.ConnectionDriverName</name>  
            <value>com.mysql.jdbc.Driver</value>  
        </property>  
        <property>  
            <name>javax.jdo.option.ConnectionUserName</name>  
            <value>root</value>  
        </property>  
        <property>  
            <name>javax.jdo.option.ConnectionPassword</name>  
            <value>root</value>  
        </property>  
        <property>    
           <name>hive.metastore.schema.verification</name>    
           <value>false</value>    
        </property>
          <property>    
           <name>hive.server2.thrift.port</name>    
           <value>10000</value>    
          </property>
          <property>    
           <name>hive.server2.thrift.host</name>    
           <value>mini1</value>    
          </property>    
    
    
    </configuration>

     对比

  • 相关阅读:
    arm-linux-gcc4.4.3编译busybox-1.25.0
    arm-linux-gcc4.4.3编译s3c2410平台linux内核
    Ubuntu 16.04上编译SkyEye的测试程序
    Ubuntu16.04上安装arm-linux-gcc4.4.3
    Ubuntu下安装deb包命令
    基环树DP
    整理
    无穷的远方,无数的人们,都和我有关
    死亡之前,我是生活本身
    我是sb
  • 原文地址:https://www.cnblogs.com/rocky-AGE-24/p/7417259.html
Copyright © 2011-2022 走看看