spark sql编程之实现合并Parquet格式的DataFrame的schema

问题导读 1.DataFrame合并schema由哪个配置项控制？ 2.修改配置项的方式有哪两种？ 3.spark读取hive parquet格式的表，是否转换为自己的格式？ 首先说下什么是schema，其实这跟通俗来讲，与我们传统数据表字段的名称是一个意思。明白了这个，我们在继续往下看。 合并schema 首先创建RDD，并转换为含有两个字段"value", "square"的DataFrame

>>阅读原文<<