sparkstreaming日志切分配置

在Spark Standalone模式下,spark默认使用org/apache/spark/log4j-defaults.properties配置,全部的日志都记录在stderr里面,因为Spark Streaming应用程序是一直运行的,时间长了之后stderr文件会很是大,占用空间的同时难以让咱们调试和定位问题,因此咱们须要切分日志,spark原生提供了对Executor日志的切分,Driv
相关文章
相关标签/搜索