首頁 > 互聯網 > 互連網資訊

雲平臺下HDFS HA的研究與實現

來源：互聯網
上載者：User
創建阿里雲帳戶，並獲得超過 40 款產品的免費試用版；而企業帳戶則可以享有總值 $1200 的免費試用版。立即註冊！

雲平臺下HDFS HA的研究與實現

西北大學 王剛

本文針對上述存在的問題,進行了深入的研究。 詳細分析了NameNode單點故障的原因,並研究了現有方案的設計思想,同時對將Hadoop移植到現有雲平臺中的可行性進行了分析,提出了基於虛擬化平臺下NameNode的高可用性方案。 該方案從兩個方面保證了NameNode的高可用性。 一方面,實現了一種基於NameNode宿主機負載的遷移策略,當宿主機的負載過大時,該策略實現將NameNode即時移轉到一個合適的宿主機上,保證了NameNode提供不間斷的服務。 另一方面,對於NameNode的單點問題,通過添加一個備用的NameNode (Standby NameNode),實現了一種自動切換機制,當NameNode宕機時,該機制實現備用節點的自動切換,由該節點繼續對外提供服務。 最後,通過部署實驗環境,類比宿主機超負荷運行及NameNode單點故障,驗證了該方案的可行性,並對性能進行了評估。


雲平臺下HDFS HA的研究與實現

本文章原先以中文撰寫並發佈於 aliyun.com，亦設英文版本，僅作資訊用途。本網站不對文章的準確性，完整性或可靠性或其任何翻譯作出任何明示或暗示的陳述或保證。如對該文章有任何疑慮或投訴，請傳送電郵至 info-contact@alibabacloud.com 並提供相關疑慮或投訴的詳細說明。職員會於 5 個工作天內與您聯絡，一經驗證之後，即會刪除該侵權內容。

聯繫我們

該頁面正文內容均來源於網絡整理，並不代表阿里雲官方的觀點，該頁面所提到的產品和服務也與阿里云無關，如果該頁面內容對您造成了困擾，歡迎寫郵件給我們，收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容，歡迎發送郵件至： info-contact@alibabacloud.com 進行舉報並提供相關證據，工作人員會在 5 個工作天內聯絡您，一經查實，本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

Get Started for Free

  • Sales Support

    1 on 1 presale consultation

    Chat Contact Sales

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

    Open a Ticket

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.

    Learn More