JavaShuo
栏目
标签
Flink/Spark 如何实现动态更新作业配置
时间 2021-07-13
栏目
Spark
繁體版
原文
原文链接
由于实时场景对可用性十分敏感,实时作业通常需要避免频繁重启,因此动态加载作业配置(变量)是实时计算里十分常见的需求,比如通常复杂事件处理 (CEP) 的规则或者在线机器学习的模型。尽管常见,实现起来却并没有那么简单,其中最难点在于如何确保节点状态在变更期间的一致性。目前来说一般有两种实现方式: 轮询拉取方式,即作业算子定时检测在外部系统的配置是否有变更,若有则同步配置。 控制流方式,即作业除了用于
>>阅读原文<<
相关文章
1.
Flink/Spark 如何实现动态更新做业配置
2.
Spark/Flink广播实现作业配置动态更新
3.
如何动态实现spring 配置更新
4.
apollo配置动态更新
5.
springcloud配置动态更新
6.
C# - 配置动态更新
7.
[Spring Boot]如何动态刷新配置
8.
Android如何实现APP自动更新
9.
Oracle监听配置(四)--如何实现静态、动态注册
10.
如何通过脚本实现数据动态更新
更多相关文章...
•
IP地址分配(静态分配+动态分配+零配置)
-
TCP/IP教程
•
XSD 如何使用?
-
XML Schema 教程
•
☆基于Java Instrument的Agent实现
•
IntelliJ IDEA 代码格式化配置和快捷键
相关标签/搜索
动态更新
动态刷新
配置
如何
何如
手动实现
及如何配置后台启动
业态
作业
置业
Spark
PHP 7 新特性
SQLite教程
红包项目实战
静态资源
数据业务
0
分享到微博
分享到微信
分享到QQ
每日一句
每一个你不满意的现在,都有一个你没有努力的曾经。
最新文章
1.
CVPR 2020 论文大盘点-光流篇
2.
Photoshop教程_ps中怎么载入图案?PS图案如何导入?
3.
org.pentaho.di.core.exception.KettleDatabaseException:Error occurred while trying to connect to the
4.
SonarQube Scanner execution execution Error --- Failed to upload report - 500: An error has occurred
5.
idea 导入源码包
6.
python学习 day2——基础学习
7.
3D将是页游市场新赛道?
8.
osg--交互
9.
OSG-交互
10.
Idea、spring boot 图片(pgn显示、jpg不显示)解决方案
本站公众号
欢迎关注本站公众号,获取更多信息
相关文章
1.
Flink/Spark 如何实现动态更新做业配置
2.
Spark/Flink广播实现作业配置动态更新
3.
如何动态实现spring 配置更新
4.
apollo配置动态更新
5.
springcloud配置动态更新
6.
C# - 配置动态更新
7.
[Spring Boot]如何动态刷新配置
8.
Android如何实现APP自动更新
9.
Oracle监听配置(四)--如何实现静态、动态注册
10.
如何通过脚本实现数据动态更新
>>更多相关文章<<