本文主要是介绍CDH6.3.2,不互通的cdh平台互导hive数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
1、先导出所有建表语句,在源CDH服务器命令行输入下面命令,该库下所有建表语句保存至hive目录中的tables.sql文件中,不知道具体路径可以全局搜索一下,拿到源库hive的建表语句后,稍微处理一下,去目标库把表建好。
hive -e "use database; show tables;" | xargs -I '{}' sh -c 'hive -e "use database; show create table '{}';"' > tables.sql
2、然后再在源CDH服务器命令行输入下面命令,命令的意思就是查询后保存到data文件中
hive -e " select * from database.table;" > data.txt
3、在目标库中新建不带分区的临时表(因为有分区不能直接导入,如果 没有分区的话可以直接跳过这步,去4步直接导入)
4、将源库中导出的data文件复制到目标库服务器上,然后把文件加载到临时表
load data local inpath '/var/data.txt' overwrite into table database.table_cache ;
5、将临时表数据写到正式表中 ,需要注意的是,select不能直接*,而是要把所有列列出来
insert overwrite table database.table partition (分区列名) select 列名1,列名2 from database.table__cache;
这篇关于CDH6.3.2,不互通的cdh平台互导hive数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!