当前位置：首页 > 系统教程 > 其它教程 > 详细页面

CDH6.3.2升级Hive到4.0.0教程

时间：2020-08-20来源：www.pcxitongcheng.com作者：电脑系统城

升级目的：为上层开发，提供统一元数据服务并能通过hive操作kudu表，kylin可以通过hive对在kudu中的数据做分析

面临问题：hive4.0之前hive没有KuduStorageHandler机制，需要hive和kudu整合功能而升级，但是github上官方开源的代码看该模块代码没完成。所以需要自己提供实现或等官方发布，为了满足当下需求，羚羊选择了自己实现

1、备份原元数据

1	`mysqldump -uroot -pxxxxxx metastore > ./metastore.sql`

2、解压备好的hive安装包

1 2	`cd /opt/cloudera` `tar -xvf apache-hive-4.0.0-SNAPSHOT-bin.tar.gz`

3、原hive安装目录下创建lib400目录

1 2	`cd /opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive` `mkdir lib400`

4、拷贝hive新版本lib到lib400目录下(只替换hive开头的jar包，其他jar包不要替换,其中hive-exec-2.1.1-cdh6.3.2.jar不要换)

1	`cp -r /opt/cloudera/apache-hive-4.0.0-SNAPSHOT-bin/lib/* /opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/lib400`

5、CM中停掉hive，及hive相关的服务

6、修改hive启动文件，调用lib400的jar包

1	`vim /opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/bin/hive<br>/HIVE_LIB`

同步lib和hive脚本文件到所有节点

1 2	`scp -P41121 -r lib400/ hadoop@10.111.15.164:/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/` `scp -P41121 -r hive hadoop@10.111.15.164:/opt/cloudera/parcels/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/bin`

7、各节点创建软链接

1	`ln -s /opt/cloudera/parcels/CDH/lib/hive/lib400/jline-2.14.6.jar /opt/cloudera/parcels/CDH/lib/hadoop-yarn/lib/jline-2.12.jar`

　　升级元数据库 metastore到hive4.0.0

1
2
3
4
5
6 source /data/metastore-backup/mysql/upgrade-2.1.0-to-2.2.0.mysql.sql
source /data/metastore-backup/mysql/upgrade-2.2.0-to-2.3.0.mysql.sql
source /data/metastore-backup/mysql/upgrade-2.3.0-to-3.0.0.mysql.sql
source /data/metastore-backup/mysql/upgrade-3.0.0-to-3.1.0.mysql.sql
source /data/metastore-backup/mysql/upgrade-3.1.0-to-3.2.0.mysql.sql
source /data/metastore-backup/mysql/upgrade-3.2.0-to-4.0.0.mysql.sql

7、CM中再启动hive

8、查看hive版本

1	`hive -version`

需要源码的朋友可以私信

相关信息

2023-07-08
win10系统任务栏颜色透明怎么更改教程
2023-07-05
台式电脑音箱没有声音怎么解决新买的音响插电脑上没声音怎么设置
2023-07-05
miui15系统怎么彻底删除垃圾文件教程

win10键盘被锁住按什么键恢复联想笔记本键盘锁了怎么解开
最近有很多小伙伴在使用联想笔记本的时候出现了问题，说自己不小心把联想笔记本键盘锁住了，想要解开却不知道联想笔记本键盘锁了怎么解开，不要着急，万能的系统城小编为大家整理好了win10键盘被锁住按什么键恢复的方法，下面...

2023-07-03
电脑3.5mm耳机接口没有声音解决教程
很多用户在使用电脑时候会遇到耳机插到电脑上，但是却没有声音的现象，很多小伙伴不知道遇到这一问题该如何解决，其实出现这种情况原因有很多，比如插口问题、设置问题等等，下面和小编一起来看看具体的解决办法吧~...

2023-06-01

热门系统总排行

装机必备

系统教程栏目

栏目热门教程

人气教程排行

站长推荐

热门系统下载