Spark kyro序列化测试

spark官网给出的几种调优点其中有一条是数据序列化 1.数据序列化,data serialization 1)java serialization(slow and large) 2)kyro serialization(qucikly compact) 注册使用,不注册性能相反 使用kryo的三种方式: 1)代码中增加conf.set("spark.serializer", "org.apac
相关文章
相关标签/搜索