hive on spark 读取json数据失败

昨天帮朋友分析了个问题:hive on spark场景下,使用json数据格式存储文件,使用hive自带的序列化方式。当计算引擎为mr时,可以正常读取,使用spark引擎时报错。 建表语句如下: 报错如下: 看到这个报错,估计是序列化和反序列化方式不匹配导致的,查看日志,果然是因为找不到反序列化器。日志报错如下: 解决思路: 1.将hive序列化方式的jar包添加到spark的lib目录下。 2.
相关文章
相关标签/搜索