【Spark亞太地區研究院系列叢書】Spark實戰高手之路-第一章 構建Spark叢集（第五步）（3）

標籤：style   blog   http   os   ar   檔案   sp   2014   on   

第四步修改設定檔slaves，如下所示：

我們設定Hadoop叢集中的從節點為SparkWorker1和SparkWorker2，把slaves檔案的內容修改為：

第五步修改設定檔core-site.xml，如下所示：

把core-site.xml檔案的內容修改為：

上述是core-site.xml檔案的最小化配置，core-site.xml各項配置可參考：

http://hadoop.apache.org/docs/r2.2.0/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml

第六步修改設定檔hdfs-site.xml，如下所示：

把hdfs-site.xml檔案的內容修改為：

上述是hdfs-site.xml檔案的最小化配置，hdfs-site.xml各項配置課參考：

http://hadoop.apache.org/docs/r2.2.0/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml

第七步修改設定檔mapred-site.xml，如下所示：

拷貝一份mapred-site.xml.template命名為mapred-site.xml，開啟mapred-site.xml 

把mapred-site.xml檔案的內容修改為：

上述是mapred-site.xml最小化配置，mapred-site.xml各項配置可參考：

http://hadoop.apache.org/docs/r2.2.0/hadoop-mapreduce-client/hadoop-mapreduce-client-core/mapred-default.xml

第七步修改設定檔yarn-site.xml，如下所示：

把yarn-site.xml的內容修改為：

上述內容是yarn-site.xml的最小化配置，yarn-site.xml檔案配置的各項內容可以參考：

http://hadoop.apache.org/docs/r2.2.0/hadoop-yarn/hadoop-yarn-common/yarn-default.xml

【Spark亞太地區研究院系列叢書】Spark實戰高手之路-第一章 構建Spark叢集（第五步）（3）