欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

Hive与Oracle之间利用Sqoop进行数据的导入导出时遇到的问题及解决方法

程序员文章站 2023-11-24 23:08:28
近期在工作中遇到了hive与oracle之间数据导入导出的问题,故整理如下,以供需要者参考。 一、oracle数据导入到hive中 /usr/bin/sqoop import \ --conn...

近期在工作中遇到了hive与oracle之间数据导入导出的问题,故整理如下,以供需要者参考。

一、oracle数据导入到hive中

/usr/bin/sqoop import \
--connect jdbc:oracle:thin:@72.*.*.185:1521:dbcxj2 \
--username name --password pw \
--table tablename \
-m 1 \
--fields-terminated-by "," \
--hive-database hivename \
--hive-table hivetable \
--hive-import \
--hive-overwrite

##解释
72.*.*.185:oracle数据库所在服务器的ip地址;
dbcxj2:sid号;
name:登录oracle数据库的用户名;
pw:登录oracle数据库的密码;
tablename:需要导出数据所在表的表名
hivename:导入hive中数据库的名字(数据库需要提前创建好)
hivetable:导入hive中表的名字(表需要提前创建好)

二、hive数据导入到oracle中

/usr/bin/sqoop export \
--connect jdbc:oracle:thin:@72.*.*.185:1521:dbcxj2 \
--username name \
--password pw \
--table tablename \
--export-dir dir \
--fields-terminated-by ',' \
-m 1

##解释
72.*.*.185:oracle数据库所在服务器的ip地址;
dbcxj2:sid号;
name:登录oracle数据库的用户名;
pw:登录oracle数据库的密码;
dir:hive中数据表的数据在hdfs上的绝对路径

你们在此过程中遇到了什么问题,欢迎留言,让我看看你们都遇到了哪些问题。