hive配置

1.centos7 安装mysql

mysql安装

• 1.由于CentOS 的yum源中没有mysql，需要到mysql的官网下载yum repo配置文件。下载命令：wget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm
• 2.然后进行repo的安装：rpm -ivh mysql57-community-release-el7-9.noarch.rpm,执行完成后会在/etc/yum.repos.d/目录下生成两个repo文件mysql-community.repo mysql-community-source.repo
• 3.使用yum命令即可完成安装,注意：必须进入到 /etc/yum.repos.d/目录后再执行以下脚本

安装命令：yum install mysql-server
启动msyql：systemctl start mysqld #启动MySQL

• 4.跳过密码验证方法：vim /etc/my.cnf(注：windows下修改的是my.ini),在文档内搜索mysqld定位到[mysqld]文本段：mysqld(在vim编辑状态下直接输入该命令可搜索文本内容),在[mysqld]后面任意一行添加“skip-grant-tables”用来跳过密码验证的过程.
• 5.为root用户授权执行以下命令，输入mysql -u root，则可进入mysql界面

       use mysql;
       delete from user where 1=1;
       GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;
       FLUSH PRIVILEGES;

• 6.xshell界面输入mysql -u root，则可进入mysql界面

2.配置hive

• 1.将安装包apache-hive-1.2.1-bin.tar.gz上传到/opt/目录下
• 2.解压安装包到/usr/local/目录下，解压命令：tar -zxf apache-hive-1.2.1-bin.tar.gz -C /usr/local/
• 3.进入到Hive的安装目录的conf目录下，重命名hive-env.sh.template为hive-env.sh。 mv hive-env.sh.template hive-env.sh
  修改hive-env.sh文件，在末尾添加如下内容 export HADOOP_HOME=/usr/local/hadoop-2.6.5
• 5.将hive-site.xml文件上传到/usr/local/apache-hive-1.2.1-bin/conf目录下
  cp /opt/hive-site.xml /usr/local/apache-hive-1.2.1-bin/conf/
• 6.上传mysql驱动mysql-connector-java-5.1.32-bin.jar到/usr/local/apache-hive-1.2.1-bin/lib目录
  cp /opt/mysql-connector-java-5.1.32-bin.jar /usr/local/apache-hive-1.2.1-bin/lib/
• 7.在终端执行以下命令

mv /usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/jline-0.9.94.jar /usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/jline-0.9.94.jar.bak
cp /usr/local/apache-hive-1.2.1-bin/lib/jline-2.12.jar /usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/
scp /usr/local/apache-hive-1.2.1-bin/lib/jline-2.12.jar slave1:/usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/
scp /usr/local/apache-hive-1.2.1-bin/lib/jline-2.12.jar slave2:/usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/
scp /usr/local/apache-hive-1.2.1-bin/lib/jline-2.12.jar slave3:/usr/local/hadoop-2.6.5/share/hadoop/yarn/lib/

• 8.设置环境变量vi /etc/profile，添加：

export HIVE_HOME=/usr/local/apache-hive-1.2.1-bin
export PATH=$HIVE_HOME/bin:$PATH
source /etc/profile使配置生效

• 9.初始化元数据库，进入hive安装包bin目录 ./schematool -dbType mysql -initSchema

• 10.在集群已启动的情况下启动Hive
  hive --service metastore & #启动元数据服务，多了一个11834 RunJar进程
nohup hive --service hiveserver2 &

3. hive使用

• 输入hive命令，则进入hive界面，接下来就可以使用mysql语句建库建表

user 数据库名;
hive> create table people(
    > num int,
    > name string,
    > age int)
    > row format delimited fields terminated by ',';  #建表，字段分隔符为,
hive> load data inpath '/sparkdata/person.txt' into table people;#导入hdfs数据到表中
hive> select * from people;
接下来在hdfs的 /user/hive/warehouse/就可以看到表了