Alluxio安装与配置
来源:互联网 发布:深圳软件免费培训 编辑:程序博客网 时间:2024/06/11 00:13
资源下载
下载地址:http://www.alluxio.org/download/
安装与配置
解压
tar xvf alluxio-1.4.0-cdh5-bin.tar.gzcp -r alluxio-1.4.0 /usr/local/ cd /usr/local/alluxio-1.4.0
配置Alluxio
要运行Alluxio二进制包,一定要先创建配置文件,从template文件创建一个配置文件:
cp conf/alluxio-env.sh.template conf/alluxio-env.sh
接着修改alluxio-env.sh
文件,将底层存储系统的地址设置为HDFS namenode的地址(如:hdfs://namenode1:8020
)。
export ALLUXIO_HOME=/usr/local/alluxio-1.4.0 # alluxio 的安装目录export ALLUXIO_MASTER_HOSTNAME=namenode1 # master 节点
修改master 配置文件 ./conf/workers
namenode1datanode1datanode3
使用 ssh 将配置好软件分发至各个节点
注意:需要打通ssh
scp -r /usr/local/alluxio-1.4.0 root@datanode1:/usr/local/alluxio-1.4.0scp -r /usr/local/alluxio-1.4.0 root@datanode3:/usr/local/alluxio-1.4.0
在集群内运行 Alluxio
注意每个节点执行
./bin/alluxio format
master节点执行
./bin/alluxio-start.sh all Mount
你可以通过 jps 去检查运行状态。
- master 上:出现 proxy、master
- worker 上:出现 proxy、worker
停止运行 Alluxio
./bin/alluxio-stop.sh all
验证启动
http://namenode1:19999 --》 查看 Alluxio master 的运行状态http://namenode1:30000 --》 查看 Alluxio worker 的运行状态
阅读全文
0 0
- Alluxio安装与配置
- alluxio安装配置
- alluxio分布式安装
- 在HDFS上配置Alluxio
- 在HDFS上配置alluxio
- alluxio
- Alluxio
- Alluxio(tachyon)集群安装部署
- Alluxio简介 & 在Alluxio上运行Spark与MapReduce
- "Spark 1.6 + Alluxio 1.2 + OFF_HEAP" 的配置
- Alluxio安装(以HDFS作为底层文件系统)
- Alluxio 1.6.1的安装部署
- Spark生态之Alluxio学习11--alluxio-1.3.0集群配置
- Spark生态之Alluxio学习12--spark调用alluxio-1.3.0配置
- 11.2 Spark与Alluxio整合原理与实战
- "Spark 1.6 + Alluxio 1.2 HA + OFF_HEAP" 的配置
- 分布式内存文件系统alluxio的安装,底层存储使用hdfs
- spark/hadoop/hive/alluxio/sqoop/zookeeper 安装文档
- [spark] Task执行流程
- Jmeter:性能测试指南
- 连接ftp出现 331 Please specify the password 的解决办法
- 第九周——项目1——二叉树算法库
- IntelliJ-IDEA常用设置
- Alluxio安装与配置
- 第五周 项目3
- 动态SQL(choose, when, otherwise)
- 了解BDTC 2017四大看点:外籍讲师、早鸟票正式公布
- HBase集群监控那些事儿
- Linux重启tomcat脚本
- iOS 11 自定义UINavigationBar适配问题,导航条向上偏移20点问题
- 网站大全
- NODEjs 从数据库读取blob格式存储的图片