hive csv檔案匯入hive第一個欄位內容為NULL

從mysql中匯出一張維度資料表，輸出格式為csv

資料如下：

1       www.dianping.com        ^/shanghai$     上海首頁        1
2       www.dianping.com        ^/shop/[0-9]*$  商戶頁  1

匯入hive

hive > load data local inpath '/data/test.txt' overwrite into table dpdim_page_name_id;

查詢資料：

hive (bi)> select * from dpdim_page_name_id;                                                                   
OK
NULL    www.dianping.com        ^/shanghai$     上海首頁        1
2       www.dianping.com        ^/shop/[0-9]*$  商戶頁  1

第一個欄位內容為NULL，詭異，懷疑是UTF-8 BOM簽名導致的
用UltraEdit開啟檔案，切換到十六進位編輯模式，檔案頭部有EF BB BF

果然！

使用UltraEdit，檔案另存，格式選擇為“UTF-8
無BOM”
重新匯入，查詢資料：
hive > select * from dpdim_page_name_id;                                                                   
OK
1       www.dianping.com        ^/shanghai$     上海首頁        1
2       www.dianping.com        ^/shop/[0-9]*$  商戶頁  1