共计 1146 个字符,预计需要花费 3 分钟才能阅读完成。
这篇文章主要为大家展示了“Alluxio 如何搭建单机和集群”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让丸趣 TV 小编带领大家一起研究并学习一下“Alluxio 如何搭建单机和集群”这篇文章吧。
Alluxio 安装部署
1. 创建目录:
1. mkdir /data/alluxio
2. cd /data/alluxio
下载 alluxio-1.2.0-hadoop2.6-bin.tar.gz 版本,解压在 cd /data/alluxio/ 目录下
3. tar -zvxf alluxio-1.2.0-hadoop2.6-bin.tar.gz
4. cd /data/alluxio/alluxio-1.2.0
2. 初始化、启动:
初始化为本地模式:
1. ./bin/alluxio bootstrap-conf localhost
2. ./bin/alluxio format
启动 / 停止:
3. ./bin/alluxio-start.sh local ./bin/alluxio-start.sh all
4. ./alluxio-stop.sh all
创建工作目录:
5. ./bin/alluxio fs mkdir /data/
6. ./bin/alluxio fs mkdir /data/spark/
集群搭建:
1、配置文件修改
在 alluxio/conf 目录下,将 alluxio-env.sh.template 拷贝到 alluxio-env.sh。确保 JAVA_HOME 指向有效的安装路径。将 ALLUXIO_MASTER_ADDRESS 设置为运行 Alluxio Master 的机器的主机名。添加所有 worker 节点的 IP 地址到 alluxio/conf/workers 文件。
alluxio-env.sh 添加:
export JAVA_HOME=/home/ys/java/jdk1.7.0_60
export ALLUXIO_MASTER_ADDRESS=host01 # host01 作为 master 节点
在 workers 文件添加工作节点
host01
host02
2、启动
分开启动,在各自的机器上运行
在 master 机器上:
./alluxio-start.sh master
./alluxio-start.sh worker
在 worker 机器上:
./alluxio-start.sh worker
3、检验集群是否搭建成功
在 master 节点创建文件,能在 worker 节点看见,说明搭建成功
./alluxio fs ls /
./alluxio fs mkdir /data
以上是“Alluxio 如何搭建单机和集群”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注丸趣 TV 行业资讯频道!