hive配置mysql_Ubuntu安装hive，并配置mysql作为元数据库

hive是基于Hadoop的一个数据仓库工具&＃xff0c;可以将结构化的数据文件映射为一张数据库表&＃xff0c;并提供简单的sql查询功能&＃xff0c;可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低&＃xff0c;可以通过类SQL语句快速实现简单的MapReduce统计&＃xff0c;不必开发专门的MapReduce应用&＃xff0c;十分适合数据仓库的统计分析。

一、安装hive

1. 下载并解压hive源程序

Hive下载地址

sudo tar -zxvf ./apache-hive-1.2.1-bin.tar.gz -C /usr/local # 解压到/usr/local中

cd /usr/local/

sudo mv apache-hive-1.2.1-bin hive # 将文件夹名改为hive

sudo chown -R dblab:dblab hive # 修改文件权限

2. 配置环境变量

为了方便使用&＃xff0c;我们把hive命令加入到环境变量中去&＃xff0c;编辑~/.bashrc文件vim ~/.bashrc&＃xff0c;在最前面一行添加:

export HIVE_HOME&＃61;/usr/local/hive

export PATH&＃61;$PATH:$HIVE_HOME/bin

保存退出后&＃xff0c;运行source ~/.bashrc使配置立即生效。

3. 修改/usr/local/hive/conf下的hive-site.xml

将hive-default.xml.template重命名为hive-default.xml&＃xff1b;新建一个文件touch hive-site.xml&＃xff0c;并在hive-site.xml中粘贴如下配置信息&＃xff1a;

javax.jdo.option.ConnectionURL

jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist&＃61;true

JDBC connect string for a JDBC metastore

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

Driver class name for a JDBC metastore

javax.jdo.option.ConnectionUserName

hive

username to use against metastore database

javax.jdo.option.ConnectionPassword

hive

password to use against metastore database

二、安装并配置mysql

1.Ubuntu下mysql的安装请参考&＃xff1a;Ubuntu安装MySQL

2.下载mysql jdbc 包,下载地址

tar -zxvf mysql-connector-java-5.1.40.tar.gz #解压

cp mysql-connector-java-5.1.40/mysql-connector-java-5.1.40-bin.jar /usr/local/hive/lib #将mysql-connector-java-5.1.40-bin.jar拷贝到/usr/local/hive/lib目录下

3. 启动并登陆mysql shell

service mysql start #启动mysql服务

mysql -u root -p #登陆shell界面

4. 新建hive数据库。

mysql> create database hive; #这个hive数据库与hive-site.xml中localhost:3306/hive的hive对应&＃xff0c;用来保存hive元数据

5. 配置mysql允许hive接入&＃xff1a;

mysql> grant all on *.* to hive&＃64;localhost identified by &＃39;hive&＃39;; #将所有数据库的所有表的所有权限赋给hive用户&＃xff0c;后面的hive是配置hive-site.xml中配置的连接密码

mysql> flush privileges; #刷新mysql系统权限关系表

6. 启动hive

启动hive之前&＃xff0c;请先启动hadoop集群。

start-all.sh #启动hadoop

hive #启动hive

使用mysql作为元数据库时登陆

解决Hive启动&＃xff0c;Hive metastore database is not initialized的错误。出错原因&＃xff1a;重新安装Hive和MySQL&＃xff0c;导致版本、配置不一致。在终端执行如下命令:

schematool -dbType mysql -initSchema

Hive 分布现在包含一个用于 Hive Metastore 架构操控的脱机工具&＃xff0c;名为 schematool.此工具可用于初始化当前 Hive 版本的 Metastore 架构。此外&＃xff0c;其还可处理从较旧版本到新版本的架构升级。