Hadoop DataNode不能正常工作的原因

來源:互聯網
上載者:User
關鍵字 nbsp; 工作 不能 原因 查看

在把Hadoop環境搭建成功,並且也Hadoop的各個元件都正常工作。 在重啟過幾次Hadoop後發現DataNode不能正常工作,打開Hadoop 的後臺HTTP://localhost:50030和HTTP://localhost:50070發現Lives Nodes為0.

查看啟動datanode的日誌資訊:

org.apache.hadoop.ipc.Client: Retryingconnect to server: uec-fe/16.157.63.10:9000. Already tried 0 time(s).

查看啟動NameNode的日誌資訊:

java.io.IOException: File xxxxxxxxx/jobtracker.info could only be replicated to 0 nodes, instead of 1

經過查看在core-site.xml中也配置了hadoop.tmp.dir屬性:

<property>

<name>hadoop.tmp.dir</name>

<value>/home/hadoop/tmp</value>

<description>A base for other temporary directories.</description>

</property>

經過網上搜索試過了很多方式都沒有用,後來看了一篇文章原來是沒有許可權的問題

sudo chown -R hadoop /home/hadoop/tmp

然後停止hadoop服務,重新格式化(一般格式化會提醒是否重新格式化該目錄,說明該目錄存在了,把該刪的目錄刪掉,然後再格式化),最後啟動hadoop服務。

總結:

解決該類問題的思路:

1>配置hadoop.tmp.dir屬性;

2>修改許可權sudo chown -R hadoop /home/hadoop/tmp(hadoop.tmp.dir的值)

最後,可能還有其他原因會導致Hadoop DataNode不能工作,正在積累中。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.