zoukankan      html  css  js  c++  java
  • Hive

    Hive是基于Hadoop的一个数据仓库工具(离线),可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。

    1.1. Hive的特点

    • 可扩展

    Hive可以自由的扩展集群的规模,一般情况下不需要重启服务。

    • 延展性

    Hive支持用户自定义函数,用户可以根据自己的需求来实现自己的函数。

    • 容错

    良好的容错性,节点出现问题SQL仍可完成执

    最简安装:用内嵌derby作为元数据库

    准备工作:安装hive的机器上应该有HADOOP环境(安装目录,HADOOP_HOME环境变量)

    安装:直接解压一个hive安装包即可

    此时,安装的这个hive实例使用其内嵌的derby数据库作为记录元数据的数据库

    此模式不便于让团队成员之间共享协作

     

    标准安装:将mysql作为元数据库

    ① 上传mysql安装包

    ② 解压:

    [root@mylove ~]# tar -xvf MySQL-5.6.26-1.linux_glibc2.5.x86_64.rpm-bundle.tar

     

    ③ 安装mysqlserver

    [root@mylove ~]# rpm -ivh MySQL-server-5.6.26-1.linux_glibc2.5.x86_64.rpm

    依赖报错:

    perl

    yum install perl

    安装完perl后 ,继续重新安装mysql-server

     

    [root@mylove ~]# rpm -ivh MySQL-server-5.6.26-1.linux_glibc2.5.x86_64.rpm

     

    又出错:包冲突conflict with

     

    移除老版本的冲突包:mysql-libs-5.1.73-3.el6_5.x86_64

     

    [root@mylove ~]# rpm -e mysql-libs-5.1.73-3.el6_5.x86_64 --nodeps

     

     

     

    继续重新安装mysql-server

     

    [root@mylove ~]# rpm -ivh MySQL-server-5.6.26-1.linux_glibc2.5.x86_64.rpm

    成功后,注意提示:里面有初始密码及如何改密码的信息

    初始密码:/root/.mysql_secret  

    改密码脚本:/usr/bin/mysql_secure_installation

     

    ① 安装mysql的客户端包:

    [root@mylove ~]# rpm -ivh MySQL-client-5.6.26-1.linux_glibc2.5.x86_64.rpm

     

    ② 启动mysql的服务端:

    [root@mylove ~]# service mysql start

    Starting MySQL. SUCCESS!

     

     

    ③ 修改root的初始密码:

    [root@mylove ~]# /usr/bin/mysql_secure_installation  按提示

     

    ④ 测试:

    mysql命令行客户端登陆mysql服务器看能否成功

    [root@mylove ~]# mysql -uroot -proot

    mysql> show databases;

     

    ⑤ root用户授予从任何机器上登陆mysql服务器的权限:

    mysql> grant all privileges on *.* to 'root'@'%' identified by '你的密码' with grant option;

    Query OK, 0 rows affected (0.00 sec)

     

    mysql> flush privileges;

    Query OK, 0 rows affected (0.00 sec)

    注意点:要让mysql可以远程登录访问

    最直接测试方法:从windows上用Navicat去连接,能连,则可以,不能连,则要去mysql的机器上用命令行客户端进行授权:

    mysql的机器上,启动命令行客户端:

    mysql -uroot -proot

    mysql>grant all privileges on *.* to 'root'@'%' identified by 'root的密码' with grant option;
    mysql>flush privileges;

    1.1.1. hive的元数据库配置

    vi conf/hive-site.xml

    <configuration>

    <property>

    <name>javax.jdo.option.ConnectionURL</name>

    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>

    <description>JDBC connect string for a JDBC metastore</description>

    </property>

     

    <property>

    <name>javax.jdo.option.ConnectionDriverName</name>

    <value>com.mysql.jdbc.Driver</value>

    <description>Driver class name for a JDBC metastore</description>

    </property>

     

    <property>

    <name>javax.jdo.option.ConnectionUserName</name>

    <value>root</value>

    <description>username to use against metastore database</description>

    </property>

     

    <property>

    <name>javax.jdo.option.ConnectionPassword</name>

    <value>root</value>

    <description>password to use against metastore database</description>

    </property>

    </configuration>                                                           

     

  • 相关阅读:
    #computer architecture#如何设计一个处理器4
    #computer architecture#如何设计一个处理器3
    #computer architecture#如何设计一个处理器2
    #computer architecture#指令集学习
    seq2seq聊天模型(三)—— attention 模型
    sequence_loss的解释
    seq2seq聊天模型(二)——Scheduled Sampling
    seq2seq聊天模型(一)
    rxjs与vue
    rxjs——subject和Observable的区别
  • 原文地址:https://www.cnblogs.com/djh222/p/11242425.html
Copyright © 2011-2022 走看看