win764bit下Eclipse串連ubuntu中hadoop2.6經驗總結

標籤：hadoop2.6   eclipse   ubuntu   win7   

    作為初學者，總結一下配置hadoop2.6的心得體會。

    首次配置時採用虛擬機器中運行Ubuntu14.04,直接配置hadoop2.6,並在其中運行Eclipse。於自己的機子效能較為一般（4核+4G），嘗試幾個案例時就出現卡的現象。後來嘗試CYGWIN代替Ubuntu,但各種配置問題不斷產生，不得不放棄。改為在win7（64bit）下採用Eclipse串連ubuntu中hadoop2.6，為了提升效能，ubuntu改為命令列模式下啟動，去掉圖形化介面。

    Ubuntu下配置hadoop2.6並沒遇到太多問題，參照一下博文：                           http://blog.csdn.net/ggz631047367/article/details/42426391

     

     Win7下將hadoop2.6外掛程式配置到Eclipse，參照博文設定虛擬機器中Ubuntu與Eclipse配置：http://www.xuebuyuan.com/1415322.html

    文中提及虛擬機器網路連接採用橋接模式，本人在實現中採用NAT也是可行的，並未遇到IP變動的問題。外掛程式配置中要涉及到hadoop.tmp.dir的配置是與網上其他攻略不同的地方，在實踐中曾因忽略此處,eclipse無法串連上HDFS。

    串連上HDFS檔案系統後，建立工程，複製WordCount代碼，如果採用的是官網上的Hadoop2.6,因為缺少hadoop.dll與winutils.exe會有異常出現，2.6版本到

http://download.csdn.net/detail/u014310430/8402965#comment下載  親測可用。放到WIN7下hadoop檔案的BIN,中，同時配置環境變數HADOOP_HOME和在Path變數中加入%HADOOP_HOME%\bin，重啟電腦。

    Ubuntu去圖形介面

    sudo vim /etc/default/gru

     找到：GRUB_CMDLINE_LINUX_DEFAULT="quiet splash"，應該是在第11行。複製本行然後把quiet splash替換成text。儲存後執行命令更新

    sudo update-grub 

     重啟後就直接進入文字介面。

    sudo reboot

本文出自 “不寫代碼的藝術家” 部落格，請務必保留此出處http://slocum.blog.51cto.com/8191426/1612249

win764bit下Eclipse串連ubuntu中hadoop2.6經驗總結