sqoop导入-hive
生活随笔
收集整理的這篇文章主要介紹了
sqoop导入-hive
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
導入關系表到HIVE
第一步:拷貝jar包
將我們mysql表當中的數據直接導入到hive表中的話,我們需要將hive的一個叫做hiveexec-3.1.1.jar 的jar包拷貝到sqoop的lib目錄下
cp /export/servers/apache‐hive‐3.1.1‐bin/lib/hive‐exec‐3.1.1.jar /export/servers/sqoop‐1.4.7.bin__hadoop‐2.6.0/lib第二步:準備hive數據庫與表
將我們mysql當中的數據導入到hive表當中來
hive (default)> create database sqooptohive; hive (default)> use sqooptohive; hive (sqooptohive)> create external table emp_hive(id int,name string,deg string,salary int ,dept string) row format delimited fields terminated by '\001';第三步:開始導入
bin/sqoop import ‐‐connect jdbc:mysql://192.168.1.7:3306/userdb ‐‐ username root ‐‐password root ‐‐table emp ‐‐fields‐terminated‐by '\001' ‐ ‐hive‐import ‐‐hive‐table sqooptohive.emp_hive ‐‐hive‐overwrite ‐‐deletetarget‐ dir ‐‐m 1第四步:hive表數據查看
select * from emp_hive;導入關系表到hive并自動創建hive表
我們也可以通過命令來將我們的mysql的表直接導入到hive表當中去
bin/sqoop import ‐‐connect jdbc:mysql://192.168.1.7:3306/userdb ‐‐ username root ‐‐password root ‐‐table emp_conn ‐‐hive‐import ‐m 1 ‐‐hivedatabase sqooptohive?
總結
以上是生活随笔為你收集整理的sqoop导入-hive的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: sqoop导入-hdfs
- 下一篇: sqoop增量导入hdfs和导出