怎么配置hadoop

151次閱讀

沒有評論

共計 758 個字符，預計需要花費 2 分鐘才能閱讀完成。

這篇文章將為大家詳細講解有關怎么配置 hadoop，丸趣 TV 小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

一、配置 hadoop

首先去 github 上面下載源碼：http://hadoop.apache.org/releases.html#News

在 linux 中安裝 jdk 和配置 ssh 免密碼登陸，其實最開始我并沒有區配置免密碼的，后來發現免密碼登陸真方便。免密碼登陸就是在控制臺上面輸入：ssh -keygen 然后一路回車就可以了。

我是把 hadoop 解壓后放在 /home/admin1/ 下載 /hadoop-2.5.2。我們主要是在 etc/hadoop 中配置文件。

1、core-site.xml

pre name= code >

2、hdfs-site.xml

configuration 
  property 
  name dfs.replication /name 
  value 1 /value 
  /property 
 /configuration

3、mapred-site.xml

pre name= code >

4、在 yarn-site.xml 中

configuration 
 property 
 name yarn.resourcemanager.hostname /name 
 value ubuntu2 /value 
  /property 
 !-- reducer 獲取數據的方式  -- 
  property 
 name yarn.nodemanager.aux-services /name 
 value mapreduce_shuffle /value 
  /property 
 /configuration

5、在 hadoop-env.sh 中添加

export JAVA_HOME=/usr/lib/jvm/java-1.7.0-openjdk-amd64

正文完