一、mysql 數(shù)據(jù)導(dǎo)入到 hdfs
? sqoop ?? ??? ??? ?????????? ##sqoop命令
? ?? ?import ?? ??? ??? ?????????? ##表示導(dǎo)入
? ?? ?--connect jdbc:mysql://ip:3306/sqoop??? ##告訴jdbc，連接mysql的url
? ?? ?--username root???????????????????????????????????? ##連接mysql的用戶名
? ?? ?--password admin ?? ?????????????????????????????? ##連接mysql的密碼
? ?? ?--table mysql1??????????????????????????????????????? ##從mysql導(dǎo)出的表名稱
? ?? ?--fields-terminated-by '\t'??????????????????????? ##指定輸出文件中的行的字段分隔符，默認(rèn)為逗號(hào)“,”
? ?? ?-m 1?????????????????????????????????????????????????????? ##復(fù)制過程使用1個(gè)map作業(yè)

二、mysql 數(shù)據(jù)導(dǎo)入到 hive

1),復(fù)制mysql表結(jié)構(gòu)到hive
sqoop
??? create-hive-table
?? ?--connect jdbc:mysql://192.168.182.128:3306/test
?? ?--username root
?? ?--password root
?? ?--table user_dfs
?? ?--hive-table users
?? ?--fields-terminated-by '\t'

2),導(dǎo)入mysql的數(shù)據(jù)到hive中
sqoop? ##sqoop命令
??? import? ##表示導(dǎo)入
?? ?--connect jdbc:mysql://192.168.182.128:3306/test? ##告訴jdbc，連接mysql的url
?? ?--username root? ##連接mysql的用戶名
?? ?--password root? ##連接mysql的密碼
?? ?--table user_dfs? ##從mysql導(dǎo)出的表名稱
?? ?--hive-import?? ##把mysql表數(shù)據(jù)復(fù)制到hive空間中。如果不使用該選項(xiàng)，意味著復(fù)制到hdfs中 ?
?? ?--hive-table users?? ##hive 表名
?? ?--m 1?? ##復(fù)制過程使用1個(gè)map作業(yè)
?? ?--fields-terminated-by '\t' ##指定輸出文件中的行的字段分隔符
三,hive 數(shù)據(jù)導(dǎo)入mysql
sqoop ##sqoop命令
??? export? ##表示導(dǎo)入
?? ?--connect jdbc:mysql://192.168.182.128:3306/test? ##告訴jdbc，連接mysql的url
?? ?--username root? ##連接mysql的用戶名
?? ?--password root? ##連接mysql的密碼
?? ?--table user_hive? ##從mysql導(dǎo)出的表名稱
?? ?--export-dir /user/hive/warehouse/users/part-m-00000 ##實(shí)際上是把hdfs中的數(shù)據(jù)導(dǎo)入到mysql中
?? ?--m 1?? ##復(fù)制過程使用1個(gè)map作業(yè)
?? ?--input-fields-terminated-by '\t' ##指定輸出文件中的行的字段分隔符

轉(zhuǎn)載于:https://blog.51cto.com/cbg23/1726474

總結(jié)

以上是生活随笔為你收集整理的sqoop 使用的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。