hive報錯（1）MoveTask

標籤：hive movetask

今天在CDH上執行hive sql的時候報了一個錯。

錯誤內容為：

    FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask
錯誤語句：

    INSERT OVERWRITE DIRECTORY ‘{$dir}‘ select * from tmp_analyse_os where logdata=‘{$begin}‘  ;

 

錯誤原因：

    hive源碼會檢查匯出的路徑是否存在，如果不存在則報這個錯。這個錯只有在CDH上的hive才會報錯，apache已經修複了這個bug，其實CDH不是沒有修複這個bug，而是添加了一個設定檔，但設定檔預設是false（蛋疼）。

解決方案：

    在hive上添加一個配置即可。

 <property>    <name>hive.insert.into.multilevel.dirs</name>    <value>true</value>  </property>

本文出自 “屌絲程式員的逆襲” 部落格，請務必保留此出處http://cdelliqi.blog.51cto.com/9028667/1541625