同一条sql语句 ,Spark Sql 和 hive shell 查询数据结果不一致。

背景: hive表数据文件存储格式是parquet,存储在aliyun的oss存储中 问题描述: saprk sql程序读取结果: hive shell 数据读取结果: hive shell查询的结果是完整的. 数据的写入 通过spark 程序执行的,存入代码如下所示: udfService.register(map, df.sqlContext) df .withColumn("year",
相关文章
相关标签/搜索