Nifi 删除hdfs上的历史数据

之前通过 nifi 每隔几分钟将数据库中的数据 写入到 hdfs上,不过后面数据中小文件过多,因为需要删除历史的数据,所幸写入hdfs的时候都是 table_name/分区键 写入的。因此只要删除历史的分区文件夹就可以完成数据的删除操作了。 ex: /user/hive/warehouse/zhong/ge_sys_person/pt=20190203/.... /user/hive/wareho
相关文章
相关标签/搜索