zoukankan      html  css  js  c++  java
  • 配置hive的元数据到Mysql中

    1. 在hive的安装目录下,进入conf目录,创建一个hive-site.xml文件
    2. 根据官方文档配置参数,拷贝数据到hive-site.xml文件中
      https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin

    注意:先创建一个metastore数据库,字符集要用latin1
    在这里插入图片描述

    <?xml version="1.0"?>
    <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
    <configuration>
    	<property>
    	  <name>javax.jdo.option.ConnectionURL</name>
    	  <value>jdbc:mysql://hostname:3306/metastore?createDatabaseIfNotExist=true</value>
    	  <description>JDBC connect string for a JDBC metastore</description>
    	</property>
    
    	<property>
    	  <name>javax.jdo.option.ConnectionDriverName</name>
    	  <value>com.mysql.jdbc.Driver</value>
    	  <description>Driver class name for a JDBC metastore</description>
    	</property>
    
    	<property>
    	  <name>javax.jdo.option.ConnectionUserName</name>
    	  <value>root</value>
    	  <description>username to use against metastore database</description>
    	</property>
    
    	<property>
    	  <name>javax.jdo.option.ConnectionPassword</name>
    	  <value>your_password</value>
    	  <description>password to use against metastore database</description>
    	</property>
    </configuration>
    
    
    1. 将mysql驱动复制到hive的lib目录里。(这有关上一篇安装MySQL的内容)
      解压驱动包
      在这里插入图片描述
      将mysql驱动复制到hive的lib目录里
      在这里插入图片描述
    2. 启动hive(别忘了先启动hdfs和yarn~~)
    start-dfs.sh
    start-yarn.sh
    hive
    

    创建一张表,试试看元数据能否保存到MySQL里

    在这里插入图片描述
    查看一下metastore库
    TBLS表
    在这里插入图片描述
    COLUMNS_V2表
    在这里插入图片描述
    DBS表
    在这里插入图片描述

    从上图中,可得知
    元数据的结构

    • 表的信息都存储在tbls表中,通过db_iddbs表中的库进行外键约束!
    • 库的信息都存储在dbs表中!
    • 字段信息存在在column_v2表中,通过CD_ID和表的主键进行外键约束!
  • 相关阅读:
    ABP理论学习之Swagger UI集成
    最佳加法表达式
    洛谷 P1736 创意吃鱼法
    洛谷P1387 最大正方形
    1078 最小生成树
    判断元素是否存在
    1531 山峰 【栈的应用】
    洛谷 P2335 [SDOI2005]位图
    矿藏估价
    二分法小结
  • 原文地址:https://www.cnblogs.com/sunbr/p/13756478.html
Copyright © 2011-2022 走看看