当前位置:   article > 正文

SparkStreaming-日志的等级的设置_spaka streaming 更改日志级别

spaka streaming 更改日志级别

我们在构建项目的时候日志等级设置是很有必要,日志太多太乱会直接影响我们的判读,SparkStreaming由于是流式处理日志会更加的多。

1、屏蔽系统日志

  1. //请注意是apache.log4j不是org.slf4j
  2. import org.apache.log4j.{Level, Logger}
  3. // 屏蔽不必要的日志 ,在终端上显示需要的日志
  4. Logger.getLogger("org.apache.spark").setLevel(Level.OFF)
  5. Logger.getLogger("org.eclipse.jetty.server").setLevel(Level.OFF)
  6. Logger.getLogger("org.apache.kafka.clients.consumer").setLevel(Level.OFF)

2、屏蔽 sparkContext 的日志

sparkContext.setLogLevel("WARN")

 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/繁依Fanyi0/article/detail/389463?site
推荐阅读
相关标签
  

闽ICP备14008679号