spark集群安装
来源:互联网 发布:范斯沃斯住宅全面数据 编辑:程序博客网 时间:2024/06/06 20:58
基础配置:JDK,关闭防火墙,免秘钥登录(略)
1,配置3个节点,ip分别设置为192.168.1.17;192.168.1.18;192.168.1.19
2,在每个节点上都解压spark安装包(spark-2.0.1-bin-hadoop2.7)
3,在每个节点conf/spark-env.sh中配置SPARK_LOCAL_IP=当前主机地址
注:以下xxxmasteripxxx统统都是192.168.1.17
3,在master节点(192.168.1.17)中通过如下命令启动master
sbin/start-master.sh -h xxmasteripxx
4,在slave节点(192.168.1.18;192.168.1.19)中通过如下命令启动slave
sbin/start-slave.sh spark://xxxmasteripxxx:7077
5,通过客户端连接
bin/spark-shell –master spark://xxxmasteripxxx:7077
6,通过UI管理界面访问,xxxmasteripxxx:8080
阅读全文
0 0
- Hadoop集群安装spark集群
- Spark集群安装
- spark集群安装
- Spark集群安装
- spark HA集群安装
- Spark standalone集群安装
- Spark集群安装
- 安装spark集群
- Spark集群安装
- Spark集群安装部署
- Spark集群安装笔记
- Spark集群安装部署
- spark集群安装
- Spark集群安装指导
- spark集群安装
- spark集群安装
- Spark集群安装
- spark 集群安装
- 文字动态发光特效代码简单实现
- 【bzoj1042】[HAOI2008]硬币购物
- 1009. 说反话 (20)
- Ubuntu 16.04安装Java JDK8
- 11.09 JavaScript基础
- spark集群安装
- 【Cocos2d-x游戏开发】解决Cocos2d-x中文乱码的三种方法
- 记一次从阿里云的rds恢复备份数据到自建数据库
- QT之qss教程-QMenuBar
- 德国电信公司表示将出售其IT外包业务
- java基本数据类型传递与引用传递的区别详解
- 常见问题解答:什么是锁存和锁存争用(11g及以上)(文档ID 1970450.1)
- (sklearn)lasso回归linear_model.Lasso()方法
- 【Python编程:从入门到实践】第二章:变量和简单数据类型