hive的安装与部署(mysql作为元数据)
(开始之前确保hadoop环境已经启动,确保linux下的mysql已经安装好)
(1)下载安装包
可从apache上下载hive安装包:
(2)压缩包解压:
(2)移动至指定目录:(这里是移动至/usr/local/下)
(1)登录mysql:
(2)建立hive用户:
(3)赋予足够权限:
grant 权限1,权限2,...权限n on 数据库名称.表名称 to 用户名@用户地址
赋予hive用户对所有数据库所有表的所有权限且任何地址都能建立连接“%”,并具有授予权。
(4)flush privileges刷新mysql的权限相关表:
(5)默认情况下mysql只允许本地登录,所以需要修改配置文件将地址绑定给注释掉:
修改如下:
(6)重启mysql服务:
重启命令:
service mysql restart
(1)使用hive用户登录mysql:
(2)创建hive专用元数据库:
编辑环境变量:
sudo gedit /etc/profile
添加如下内容:
让修改立即生效:
source /etc/profile
(1)复制hive-default.xml.template创建hive-site.xml,一个是系统默认的一个是自定义的,hive优先以自定义的为准。
(2) 修改hive-site.xml文件(在这之前,需先将hive-site.xml中原有的东西全部删掉,然后添加下列内容:)
<property> <name>javax.jdo.option.connectionurl</name> <value>jdbc:mysql://localhost/hive?createdatabaseifnotexist=true</value> </property> <property> <name>javax.jdo.option.connectiondrivername</name> <value>com.mysql.jdbc.driver</value> </property> <property> <name>javax.jdo.option.connectionusername</name> <value>hive</value> </property> <property> <name>javax.jdo.option.connectionpassword</name> <value>password</value> </property>
“hive?createdatabaseifnotexist=true”如果hive数据库不存在就自动创建一个数据库
(驱动包名为:mysql-connector-java-5.1.46-bin.jar)
出现如下提示表示初始化成功:
在hive中创建表xp:
在mysql中查看:(use hive切换到数据库hive)
显示 hive 数据库中的数据表:
查看 hive 的元数据信息:
到此hive集成mysql作为元数据已完成。
如对本文有疑问, 点击进行留言回复!!
HBase Filter 过滤器之FamilyFilter详解
去 HBase,Kylin on Parquet 性能表现如何?
如何找到Hive提交的SQL相对应的Yarn程序的applicationId
网友评论