window下Eclipse配置聯調hadoop1.0.3叢集

標籤：style   blog   http   io   os   ar   for   檔案   sp   

前序：因在widow下用Eclipse聯調hadoop2.2.0運行程式沒有成功，網上暫時解決辦法不多，就折中了下，串連hadoop1.0.3偽分布式

一。用到的環境和工具

1.Eclipse採用的是indio版本，這個可以用官網下載

2.Eclipse hadoop外掛程式：hadoop-eclipse-plugin-1.0.3.jar,

    ：http://download.csdn.net/detail/lifuxiangcaohui/7963261

二.安裝hadoop1.0.3偽分布式

1.安裝SSH免登入

        安裝JDK等等：查看我早期的安裝hadoop2.20的筆記（都是運行成功的）：http://blog.csdn.net/lifuxiangcaohui/article/details/21635791

2.配置hadoop1.0.3相應的設定檔：

  2.1修改Hadoop核心設定檔core-site.xml，配置HDFS的地址和連接埠號碼
  vi conf/core-site.xml
   <configuration>
        <property>
             <name>fs.default.name</name>
               <value>hdfs://localhost:9000</value>   
      </property>      
   </configuration>
2.2修改Hadoop中HDFS的配置，修改replication
   vi conf/hdfs-site.xml
   <configuration>
          <property>
             <name>dfs.replication</name>         
         <value>1</value>
       </property>
   </configuration>
2.3修改Hadoop中MapReduce的設定檔，配置的是JobTracker的地址和連接埠 
   vi conf/mapred-site.xml
   <configuration>
           <property>
             <name>mapred.job.tracker</name>
            <value>localhost:9001</value>
          </property>
   </configuration>


3格式化Hadoop的檔案系統HDFS
   bin/hadoop namenode -format
4,啟動hadoop
   bin/start-all.sh


5.最後，驗證Hadoop是否安裝成功。開啟瀏覽器，分別輸入一下網址：
http://localhost:50030    (MapReduce的Web頁面)
http://localhost:50070    (HDfS的web頁面)
如果都能查看，說明安裝成功。

三。配置本地Eclipse

可以看我轉載的一篇超詳細的文章：http://blog.csdn.net/lifuxiangcaohui/article/details/39500131

由於時間有限，寫的文章有些粗糙和懶，還請諒解

window下Eclipse配置聯調hadoop1.0.3叢集