Spark 打印逻辑计划日志指南

要打印出 Spark 的逻辑计划日志，可以按照以下步骤进行操作：

1. 在 Spark 的配置文件中，将日志级别设置为 DEBUG。可以在 '$SPARK_HOME/conf/log4j.properties' 文件中找到该配置项，并将其值修改为 'DEBUG'。
2. 在代码中使用 'log' 对象来输出日志信息。可以使用 'org.apache.spark.internal.Logging' trait 来获取 'log' 对象。例如：

   import org.apache.spark.internal.Logging
   
   object MyJob extends Logging {
     def main(args: Array[String]): Unit = {
       log.debug('This is a debug log message.')
     }
   }
   

   这样就可以在运行 Spark 作业时，将日志信息输出到控制台或日志文件中。
3. 运行 Spark 作业。

通过以上步骤，你就可以在控制台或日志文件中查看 Spark 的逻辑计划日志信息了。记得在调试完成后，将日志级别恢复为原来的设置，以避免产生过多无用的日志信息。