Hive分桶(bucket)

一 什么是桶的概念，和分区有啥区别？ 对于每一个表或者分区，可以进一步细分成桶，桶是对数据进行更细粒度的划分。默认时对某一列进行hash，使用hashcode对 桶的个数求模取余，确定哪一条记录进入哪一个桶。 Hive在查询数据的时候，一般会扫描整个表的数据,会消耗很多不必要的时间。有些时候，我们只需要关心一部分数据,比如WHERE子句所接的查询条件，那这时候这种全表扫描的方式是很影响性能的。从而

>>阅读原文<<