SparkThiftServer 资源动态分配

背景 在做的项目BI 使用的是sparkJDBC来去查询和处理数据。依赖的SparkThiftServer这一块东西还是挺多的,今天来讲一下资源动态分配。有了资源动态分配的功能,使其在处理大数据量或者小数据量的时候,都可以处理,而且相对来说不用一直占用较多资源。 本文大部分参考官方文档,小部分是自己实际测试得出的结论。 官方文档地址:https://spark.apache.org/docs/la
相关文章
相关标签/搜索