Spark 启动脚本——sbin/slaves.sh
来源:互联网 发布:中华书局 知乎 编辑:程序博客网 时间:2024/05/19 08:40
1. 如果参数小于1,返回。格式:slaves.sh [--config <conf-dir>] command...
2. 执行sbin/spark-config.sh,加载基本环境变量
3. 设置HOSTLIST为变量$SPARK_SLAVES的值
4. 如果存在,获取--config参数,即配置文件目录,目录不存在则返回
5. 执行conf/spark-env.sh
6. 如果HOSTLIST为空,则设置为conf/slaves
7. 设置ssh参数为“-o StrictHostKeyChecking=no ”
8. 加载$HOSTLIST文件中的列表地址,使用ssh登录并执行脚本参数传入的命令command
9. sleep或者直接wait保证命令执行结束
http://www.cnblogs.com/hujunfei/p/3624459.html
0 0
- Spark 启动脚本——sbin/slaves.sh
- Spark 启动脚本——sbin/start-slaves.sh
- Spark:通过start-slaves.sh脚本启动worker报错:Permission denied
- Spark 启动脚本——启动总结
- spark-shell.sh脚本分析
- Tomcat启动脚本catalina.sh
- Tomcat启动脚本catalina.sh
- Tomcat启动脚本catalina.sh
- Tomcat启动脚本catalina.sh
- sh脚本启动java程序
- Tomcat启动脚本catalina.sh
- centos启动——/sbin/init 的破坏与修复
- Spark运行脚本解析 - start-all.sh
- 1. Locust的hack之路- 压测脚本的传输及自启动slaves
- spark shell启动脚本
- Spark 启动脚本分析
- Spark使用start-slave.sh启动Worker
- struts2 调用spark程序——java 程序调用脚本启动spark
- Spark Shell各种操作及详细说明
- spark rdd 转换过程
- 机器学习实战--kMeans
- jvm最终配置
- Spark 启动脚本——启动总结
- Spark 启动脚本——sbin/slaves.sh
- mysql 主从搭建
- java 集合框架
- Spark 启动脚本——sbin/start-slaves.sh
- 获取info
- UVa 10054 - The Necklace
- C#实验2.4
- Spark集群搭建——SSH免密码验证登陆
- JPA & Hibernate 注解