利用SemanticAnalyzerHook来过滤不加分区条件的Hive查询

    咱们Hadoop集群中将近百分之80的做业是经过Hive来提交的,因为Hive写起来简单便捷,并且咱们又提供了Hive Web Client,因此使用范围很广,包括ba,pm,po,sales都在使用hive进行ad-hoc查询,可是hive在下降用户使用门槛的同时,也使得用户常常写不合理开销很大的语句,生成了不少的mapreduce job,占用了大量slot数,其中最典型的例子就是分区
相关文章
相关标签/搜索