【Python3实战Spark大数据分析及调度】第7章 Spark Core调优

History Server Spark的UI界面端口默认4040，只能在Application运行的时候维持。 修改参数使得spark保存运行日志和UI界面，端口改为18080 位置 改完之后的UI界面 序列化 序列化的作用：Shuffle的时候需要进行网络传输时，需要将数据序列化进行传输；节省内存的使用 序列化的类型： - Java serialization：默认，能够运行实现了 java.

>>阅读原文<<