Spark Web界面
来源:互联网 发布:大数据薪资待遇 编辑:程序博客网 时间:2024/05/29 10:12
1.7 Spark Web 界面
每一个SparkContext发布一个web界面,默认端口是4040,它显示了应用程序的有用信息。这包括:
Ø 一系列的调度阶段和任务
Ø 对于RDD大小和内存使用的总结
Ø 环境信息
Ø 运行的执行器(executor)的信息
你可以通过浏览器访问http://<driver-node>:4040,当然,你必去先启动SparkContext。比如命令:./bin/spark-shell,出现下面的web界面信息:
如果某台机器上运行多个SparkContext,它的web端口会自动连续加一,比如4041,4042,4043等。为了浏览持久的事件日志,设置park.eventLog.enabled就可以了。
欢迎关注我的微信公众号
0 0
- spark连接web界面
- Spark Web界面
- Spark UI界面原理
- Spark UI界面原理
- spark的UI界面
- web界面
- web开发框架-spark
- Openfire+Spark+Spark Web安装配置
- Openfire+Spark+Spark Web安装配置
- Openfire+Spark+Spark Web下载地址
- Spark系列(4)-Spark Web 页面
- web界面小感
- 痛苦的web界面
- WEB界面开发规范
- WEB界面开发规范
- 关于Web GUI界面......
- WEB界面开发规范
- web界面规范
- HDU 3635 Dragon Balls 七龙珠 Union Find算法
- Android 高手进阶之自定义View,自定义属性(带进度的圆形进度条)
- Python查找文件内容
- linux 常用查看系统配置命令
- 虚函数相关问题分析
- Spark Web界面
- POJ--1122--FDNY to the Rescue!【最短路】
- 各种操作系统上的操作系统日志位置
- Unable to instantiate Action, MenuAction, defined for 'QueryMenuAll' in namespace '/'MenuAction
- TransactionSynchronizationManager理解
- 基于MFC对话框的qq游戏连连看外挂
- 出现如下这个错误
- 武汉华嵌-嵌入式培训专家笔试题目
- 标题 随便写阿什利的客服经理开始的减肥死了快捷方式来得快