ETL万岁

提取转换负载是用于从一个数据系统中提取数据并加载到另一个数据系统中的过程。 涉及的数据系统称为源系统和目标系统。 来自源系统的数据形状与目标系统不匹配，因此需要进行一些转换以使其兼容，该过程称为Transformation 。 转换是由map / filter / reduce操作完成的。 为了处理数据系统之间的不兼容性，需要一些元数据。 哪种类型的元数据会有用？ 将源数据转换为许多不同的形状以处

>>阅读原文<<