修改Spark的日志级别_spark standolne 任务设置日志级别

作者：菜鸟追梦旅行 | 2024-04-09 01:35:07

踩

spark standolne 任务设置日志级别

从我们运行的 spark 程序运行的情况来看，可以看到大量的 INFO 级别的日志信息。淹没了我们需要运行输出结果。可以通过修改 Spark 配置文件来 Spark 日志级别。

以下是详细步骤：

第一步：先进入 conf 目录

[hadoop@hadoop05 conf]$ cd $SPARK_HOME/conf

第二步：准备 log4j.properties

[hadoop@hadoop05 conf]$ cp log4j.properties.template log4j.properties

第三步：配置日志级别：

把 INFO 改成你想要的级别：主要有 ERROR, WARN, INFO, DEBUG 几种

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/菜鸟追梦旅行/article/detail/389451