spark的logDebug模式设置
来源:互联网 发布:js object 第一个元素 编辑:程序博客网 时间:2024/05/17 22:48
spark采用的是log4j输出运行日志,为了获取spark运行中的日志信息,可以在$SPARK_HOME的conf目录下,
比如输出spark.storage package的debug运行日志,设置如下:
# Set everything to be logged to the console
log4j.rootCategory=INFO, console
log4j.appender.console=org.apache.log4j.ConsoleAppender
log4j.appender.console.layout=org.apache.log4j.PatternLayout
log4j.appender.console.layout.ConversionPattern=%d{yy/MM/dd HH:mm:ss} %p %c{1}: %m%n
# Ignore messages below warning level from Jetty, because it's a bit verbose
log4j.logger.org.eclipse.jetty=WARN
log4j.logger.spark.storage=debug
- spark的logDebug模式设置
- spark设置本地运行模式
- Spark的部署模式
- Spark的运行模式
- spark 的HA模式
- Spark的部署模式
- Spark的运行模式
- Spark的运行模式
- 【Spark】Spark的Standalone模式安装部署
- 【Spark】Spark的Standalone模式安装部署
- Spark的standalone模式部署
- spark的运行模式总结
- spark的yarn模式运行
- spark的standalone模式部署
- spark的standlone模式安装
- spark入门笔记(二)spark的stanalone模式
- hive,spark的远程调试设置
- spark编程中设置hadoop的属性
- Android换肤的两种思路
- CPU的内部物理结构介绍
- WindowsAPI使用详解——GetVersion|GetVersionEx 获取操作系统版本和名称 - [VC++编程]
- vim 配置文件vimrc(二)
- error: No curses/termcap library found的解决办法
- spark的logDebug模式设置
- POM of SSH Activiti Integration
- 杭电ACM 2021 发工资咯:)
- 各种经典学习、技术、资料网站 (持续更新ing)
- 学习笔记之内核对象
- Myeclipse自动提醒
- 浅谈C语言中的数据对齐
- android手机几个目录的介绍:/system/app; /system/vender;/data/app;/data/dalvik-cache;/mnt/asec;/mnt/secure
- 在服务器上用Fiddler抓取HTTPS流量