Spark性能调优

2019独角兽企业重金招聘Python工程师标准>>> 通常我们对一个系统进行性能优化无怪乎两个步骤——性能监控和参数调整，本文主要分享的也是这两方面内容。 性能监控工具 【Spark监控工具】 Spark提供了一些基本的Web监控页面，对于日常监控十分有用。 1. Application Web UI http://master:4040（默认端口是4040，可以通过spark.ui.port修

>>阅读原文<<