共計 1146 個字符,預(yù)計需要花費 3 分鐘才能閱讀完成。
這篇文章主要為大家展示了“Alluxio 如何搭建單機和集群”,內(nèi)容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓丸趣 TV 小編帶領(lǐng)大家一起研究并學(xué)習一下“Alluxio 如何搭建單機和集群”這篇文章吧。
Alluxio 安裝部署
1. 創(chuàng)建目錄:
1. mkdir /data/alluxio
2. cd /data/alluxio
下載 alluxio-1.2.0-hadoop2.6-bin.tar.gz 版本,解壓在 cd /data/alluxio/ 目錄下
3. tar -zvxf alluxio-1.2.0-hadoop2.6-bin.tar.gz
4. cd /data/alluxio/alluxio-1.2.0
2. 初始化、啟動:
初始化為本地模式:
1. ./bin/alluxio bootstrap-conf localhost
2. ./bin/alluxio format
啟動 / 停止:
3. ./bin/alluxio-start.sh local ./bin/alluxio-start.sh all
4. ./alluxio-stop.sh all
創(chuàng)建工作目錄:
5. ./bin/alluxio fs mkdir /data/
6. ./bin/alluxio fs mkdir /data/spark/
集群搭建:
1、配置文件修改
在 alluxio/conf 目錄下,將 alluxio-env.sh.template 拷貝到 alluxio-env.sh。確保 JAVA_HOME 指向有效的安裝路徑。將 ALLUXIO_MASTER_ADDRESS 設(shè)置為運行 Alluxio Master 的機器的主機名。添加所有 worker 節(jié)點的 IP 地址到 alluxio/conf/workers 文件。
alluxio-env.sh 添加:
export JAVA_HOME=/home/ys/java/jdk1.7.0_60
export ALLUXIO_MASTER_ADDRESS=host01 # host01 作為 master 節(jié)點
在 workers 文件添加工作節(jié)點
host01
host02
2、啟動
分開啟動,在各自的機器上運行
在 master 機器上:
./alluxio-start.sh master
./alluxio-start.sh worker
在 worker 機器上:
./alluxio-start.sh worker
3、檢驗集群是否搭建成功
在 master 節(jié)點創(chuàng)建文件,能在 worker 節(jié)點看見,說明搭建成功
./alluxio fs ls /
./alluxio fs mkdir /data
以上是“Alluxio 如何搭建單機和集群”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習更多知識,歡迎關(guān)注丸趣 TV 行業(yè)資訊頻道!