spark集群启动命令和Web端口查看
来源:互联网 发布:linux下php言编程ide 编辑:程序博客网 时间:2024/06/06 01:43
itcast01上:
启动hadoop集群:
cd /itcast/hadoop-2.6.0/sbin/
./start-dfs.sh
启动yarn:
./start-yarn.sh
itcast02上:
启动resourcemanager
/itcast/hadoop-2.6.0/sbin/yarn-daemon.sh start resourcemanager
itcast01上:
启动spark集群:
cd /itcast/spark-1.3.1-bin-hadoop2.6/sbin/
./start-all.sh
itcast02上启动spark备用 master节点
/itcast/spark-1.3.1-bin-hadoop2.6/sbin/start-master.sh
itcast01上:启动spark shell
/itcast/spark-1.3.1-bin-hadoop2.6/sbin/start-master.sh
bin/spark-shell –master
如果配置了SparkHA,比如zookeeper,在使用spark-submit提交任务时,则需要指定两个master 的信息:spark://itcast01:7077,itcast02:7077
namenode的webUI端口:50070
yarn的web端口:8088
spark集群的web端口:8080
spark-job监控端口:4040
1 0
- spark集群启动命令和Web端口查看
- Spark集群启动命令汇总
- 启动关闭hadoop集群和spark集群
- Hadoop和Spark修改shh端口以及web监控端口
- 启动spark集群
- cmd 查看端口 和关闭进程命令
- cmd命令查看端口和进程信息
- cmd命令查看端口和进程信息
- WINDOWS之端口和进程查看命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Linux查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- Centos查看端口占用情况和开启端口命令
- 高并发之Redis初级
- PEB TEB结构体使用
- 【华为 OJ】 明明的随机数
- 让猪起飞的风口——《虚拟现实:你不可不知的下一代计算平台》
- CSU 1588 合并果子
- spark集群启动命令和Web端口查看
- 简单算法学习笔记二
- 大整数相乘
- hdu 5792 World is Exploding 树状数组
- RabbitMQ(二)RabbitMQ基础概念详细介绍
- Ubuntu安装搜狗拼音相关问题
- VC隐藏任务栏,让窗口全屏
- 师兄帮帮我
- Cow Marathon