linux下搭建hadoop環境步驟分享

1、下載hadoop包
wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz
2、tar xvzf hadoop-0.20.2.tar.gz
3、安裝JDK，從oracle網站上直接下載JDK，地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
4、chmod +x jdk-6u21-linux-i586.bin;./jdk-6u21-linux-i586.bin,目前的目錄下出現了jdk1.6.0_21目錄
5、配置java環境變數 vi /etc/profile

複製代碼 代碼如下:export JAVA_HOME=/root/src/hadoop/jdk1.6.0_21
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$PATH:$JAVA_HOME/bin

在終端下執行 source /etc/profile 使配置生效

6、可以用以下命令查看
顯示JAVA版本 java -vesion

複製代碼 代碼如下:echo $JAVA_HOME
which java
echo $PATH
echo $CLASSPATH

如果java -version沒有顯示你的JDK的版本，請檢查你的path的設定。

7、配置hadoop環境變數 vi /etc/profile

複製代碼 代碼如下:export HADOOP_INSTALL=/root/src/hadoop/hadoop-0.20.2
export PATH=$PATH:$HADOOP_INSTALL/bin

source /etc/profile 使配置生效

8、測試環境
hadoop version 顯示
Hadoop 0.20.2
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707
Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010

9、配置
hadoop每一個組件都使用一個XML檔案配置，核心屬性在core-site.xml中，HDFS屬性在hdfs-site.xml中，MapReduce屬性在mapred-site.xml中。這些檔案都在conf子目錄下。
hadoop有本地模式、偽分布模式和完全分布模式三種，預設配置為本地模式，沒有守護進程，一切都運行在單個JVM上。