Run Hive on spark tasks with Hue, always running more than 30 min

时间 2021-01-17

标签大数据 hive hue hive on spark 栏目 Hadoop 繁體版

原文原文链接

环境 CDH 6.3.1 Hive 2.1.1（执行引擎Spark） Hue Spark 2.4.0 问题 Hue执行hive sql: 理论上14.005s已经执行完了，结果已经正常返回，但是hue上的job 持续了30m才结束，详情如下：解决思路查找各种资料，也调整各种timeout, 就是不work; 因为每次都是规律的30分钟结束，最终找到hive配置文件中的一个配置：调整此值为30

>>阅读原文<<

1. Running Deep Learning on Distributed GPUs With Spark
2. Running Spark on Kubernetes
3. Spark记录-源码编译spark2.2.0（结合Hive on Spark/Hive on MR2/Spark on Yarn）
4. Hue: run sqoop free query
5. Hive on Mapreduce、Hive on Spark、SparkSQL、Spark on Hive
6. What makes a running topology: worker processes, executors and tasks
7. Spark SQL with Hive
8. Spark2.0.1 on yarn with hue 集群安装部署（八）hue+livy+spark整合
9. spark on hive
10. Dream------hive on spark
更多相关文章...
• PHP min() 函数 - PHP参考手册
• Docker run 命令 - Docker命令大全
• 为了进字节跳动，我精选了29道Java经典算法题，带详细讲解
• TiDB 在摩拜单车在线数据业务的应用和实践

最新文章

1. 在windows下的虚拟机中,安装华为电脑的deepin操作系统
2. 强烈推荐款下载不限速解析神器
3. 【区块链技术】孙宇晨：区块链技术带来金融服务的信任变革
4. 搜索引起的链接分析-计算网页的重要性
5. TiDB x 微众银行 | 耗时降低 58%，分布式架构助力实现普惠金融
6. 《数字孪生体技术白皮书》重磅发布（附完整版下载）
7. 双十一“避坑”指南：区块链电子合同为电商交易保驾护航！
8. 区块链产业，怎样“链”住未来？
9. OpenglRipper使用教程
10. springcloud请求一次好用一次不好用zuul Name or service not known

本站公众号

欢迎关注本站公众号,获取更多信息

1. Running Deep Learning on Distributed GPUs With Spark
2. Running Spark on Kubernetes
3. Spark记录-源码编译spark2.2.0（结合Hive on Spark/Hive on MR2/Spark on Yarn）
4. Hue: run sqoop free query
5. Hive on Mapreduce、Hive on Spark、SparkSQL、Spark on Hive
6. What makes a running topology: worker processes, executors and tasks
7. Spark SQL with Hive
8. Spark2.0.1 on yarn with hue 集群安装部署（八）hue+livy+spark整合
9. spark on hive
10. Dream------hive on spark

>>更多相关文章<<