Spark 性能调优 序列化之使用kryo

Kryo与Spark内部默认序列化机制优缺点 默认优点 默认情况下，Spark内部使用java的序列化机制，ObjectOutputStream/ObjectInputStream 对象输入输出流机制，来进行序列化，这种默认序列化机制的好处在于，处理起来比较方便，不需要我们自己手动做什么事情，只是，在算子里使用到的变量，必须是实现Serializable接口的，可序列化即可。 默认缺点 默认序列机

>>阅读原文<<