JavaShuo
栏目
标签
SparkStreaming动态感知kafka某个topic下partition
时间 2021-01-19
标签
spark
kafka
栏目
Kafka
繁體版
原文
原文链接
说明SparkStreaming动态感知kafka某个topic下partition,需要对kafka版本区分来看。 kafka 0.8版本 结论:kafka 0.8版本和Spark Streaming结合的DirectStream这种形式的API里面,是不支持kafka新增分区或者topic检测的。 所以如果想读取新的分区中的数据,那么就得重新启动Spark Streaming应用。 原因:Di
>>阅读原文<<
相关文章
1.
【Kafka】kafka动态获取某个topic的partition信息
2.
Kafka动态调整topic分区partition
3.
kafka的Topic&Partition
4.
kafka Topic 与 Partition
5.
kafka topic增长partition
6.
kafka之为topic增长partition
7.
Kafka中的topic和partition
8.
理解 Kafka 中的 Topic 和 Partition
9.
7.解析Kafka中的 Topic 和 Partition
10.
kafka知识(partition group)
更多相关文章...
•
C# 动态数组(ArrayList)
-
C#教程
•
IP地址分配(静态分配+动态分配+零配置)
-
TCP/IP教程
•
算法总结-滑动窗口
•
Docker容器实战(七) - 容器眼光下的文件系统
相关标签/搜索
topic&partition
sparkstreaming+kafka
partition
topic
某个
sparkstreaming
感知
动态
flume+kafka+sparkstreaming
flume+kafka+sparkstreaming+hbase
Kafka
Spark
Redis教程
NoSQL教程
MySQL教程
静态资源
0
分享到微博
分享到微信
分享到QQ
每日一句
每一个你不满意的现在,都有一个你没有努力的曾经。
最新文章
1.
1.2 Illustrator多文档的几种排列方式
2.
5.16--java数据类型转换及杂记
3.
性能指标
4.
(1.2)工厂模式之工厂方法模式
5.
Java记录 -42- Java Collection
6.
Java记录 -42- Java Collection
7.
github使用
8.
Android学习笔记(五十):声明、请求和检查许可
9.
20180626
10.
服务扩容可能引入的负面问题及解决方法
本站公众号
欢迎关注本站公众号,获取更多信息
相关文章
1.
【Kafka】kafka动态获取某个topic的partition信息
2.
Kafka动态调整topic分区partition
3.
kafka的Topic&Partition
4.
kafka Topic 与 Partition
5.
kafka topic增长partition
6.
kafka之为topic增长partition
7.
Kafka中的topic和partition
8.
理解 Kafka 中的 Topic 和 Partition
9.
7.解析Kafka中的 Topic 和 Partition
10.
kafka知识(partition group)
>>更多相关文章<<