【轉】清理Kylin的中間儲存資料(HDFS & HBase Tables)

標籤：

http://blog.csdn.net/jiangshouzhuang/article/details/51290399

Kylin在建立cube過程中會在HDFS上產生中間資料。另外，當我們對cube執行purge/drop/merge時，一些HBase的表可能會保留在HBase中，而這些表不再被查詢，儘管Kylin會做一些自動的記憶體回收，但是它可能不會覆蓋所有方面，所以需要我們能夠每隔一段時間做一些離線儲存的清理工作。具體步驟如下：

1.     檢查哪些資源需要被清理，這個操作不會刪除任何內容：

${KYLIN_HOME}/bin/kylin.sh org.apache.kylin.storage.hbase.util.StorageCleanupJob --delete false

 

2.     根據上面的輸出結果，挑選一兩個資源看看是否是不再需要的。接著，在上面的命令基礎上添加“–delete true”選項，開始執行清理操作，命令執行完成後，中間的HDFS文和盒HTables表就被刪除了。

【轉】清理Kylin的中間儲存資料(HDFS & HBase Tables)