Spark读取Hive数据写入Hbase

使用spark方式写入java 在使用Spark时常常须要把数据落入HBase中,若是使用普通的Java API,写入会速度很慢。还好Spark提供了Bulk写入方式的接口。那么Bulk写入与普通写入相比有什么优点呢?sql BulkLoad不会写WAL,也不会产生flush以及split。 若是咱们大量调用PUT接口插入数据,可能会致使大量的GC操做。除了影响性能以外,严重时甚至可能会对HBas
相关文章
相关标签/搜索