Hadoop源碼匯入Eclipse

標籤：java   os   代碼   學習   安裝   file   

需要進一步學習hadoop、需要看看內部源碼實現，因此需要將hadoop源碼匯入都eclipse中，簡單總結一下，具體步驟如下：

首先確保已經安裝了git、maven3、protobuf2.5、如果沒有安裝需要提前安裝一下

1、下載hadoop源碼

git clone git://git.apache.org/hadoop-common.git

2、進入hadoop-common目錄，用maven產生eclipse工程

mvn install -DskipTests
mvn eclipse:eclipse -DdownloadSources=true -DdownloadJavadocs=true

3、匯入Eclipse

匯入Hadoop-Common

File->import...->Choose "Existing Projects into Workspace" 選擇hadoop-common-project目錄為跟目錄匯入

File->import...->Choose "Existing Projects into Workspace" 選擇hadoop-assemblies目錄為跟目錄匯入

匯入HDFS

File->import...->Choose "Existing Projects into Workspace" 選擇hadoop-hdfs-project目錄為跟目錄匯入

匯入MapReduce

File->import...->Choose "Existing Projects into Workspace" 選擇hadoop-mapreduce-project目錄為跟目錄匯入

匯入YARN

File->import...->Choose "Existing Projects into Workspace" 選擇hadoop-yarn-project目錄為跟目錄匯入

OK、全部匯入成功，但是需要注意兩個地方：

首先如果想hadoop-common全部編譯成功，需要將hadoop-common的target/generate-test-source/java目錄設定source folder

其次還得把JDK lib目錄的tools.jar添加到classpath中。

配置好上面之後，所有代碼都清晰可見