hadoop源碼解讀namenode高可靠：HA;web方式查看namenode下資訊；dfs/data決定datanode儲存位置

標籤：style   blog   c   ext   http   color   

點擊browserFilesystem，和命令查看結果一樣

當我們查看hadoop源碼時，我們看到hdfs下的hdfs-default.xml檔案資訊

我們尋找${hadoop.tmp.dir}這是引用變數，肯定在其他檔案有定義，在core-default.xml中查看到，這兩個設定檔有個共同點：

就是不要修改此檔案，但可以複製資訊到core-site.xml和hdfs-site.xml中修改

usr/local/hadoop 是我存放hadoop檔案夾的地方

幾個關於namenode的重要檔案

這裡的in_use.lock本身沒什麼東西，但是它標記著這個namenode被使用，不準其他進程調用

current下存放了重要訊息，尤其是fsimage，是namenode核心資訊

edits用於交易處理

HA措施之一就是備份多個檔案資訊，可以用逗號隔開多個目錄儲存，註：不能在hdfs-default.xml中直接修改，而應該複製到hdfs-site下修改

dfs下的data檔案決定datanode儲存位置

HA措施之二：secondary用於輔助namenode，合并edits到fsimage。從secondary恢複資料可能存在部分丟失（類似windows備份點），但我認為這裡的資訊可能儲存到了硬碟，而namenode儲存的資訊可能還包括記憶體中的資訊

HA措施之三：replication，在設定檔中設定副本個數，存在不同datanode上