關於使用sqoop export 匯出hdfs資料到mysql中文亂碼問題

標籤：

 前幾天使用sqoop將hdfs的資料匯入mysql中，發現中文導進去後會亂碼，我的執行命令是：

sqoop export  --connect "jdbc:mysql://10.19.157.*****?useUnicode=true&characterEncoding=utf-8" --table msg_rule_copy --username root --password root*** --export-dir $path --hadoop-home $home --direct

剛開始以為是mysql編碼沒有設定好的問題，後面發現mysql是沒問題的，都是uft-8

然後用sqoop 測試一下sql語句插入，發現也是沒問題的。

 sqoop eval --connect "jdbc:mysql://10.19.*****"  --username root --p --query "insert into msg_rule_copy(module,levelId) values(‘中文‘,‘90‘);"

 

jdbc執行sql語句沒問題，我就想，除非sqoop他不是用jdbc來插入資料的，後面突然想起一個快速執行的參數:

--direct                                                   Use direct
                                                              export fast
                                                              path

我把這個參數去掉，果然好了。

結論：--direct快速執行模式不支援中文插入。

關於使用sqoop export 匯出hdfs資料到mysql中文亂碼問題