Spark SQL建表字段超过22个(scala2.1x)

Spark SQL建表字段超过22个(scala2.1x) 办法1:case class类继承Product类;未成功 方法2:把字段处理为数组格式,根据下标来取数据,起别名;成功 坏处:无法使用scala函数,只能用sql处理,并且sql会比较长,可以先在前面把数据处理完,然后再用sql处理 测试样例: 记录:spark sql自定义udf 样例 sqc.udf.register(“str_sp
相关文章
相关标签/搜索