Spark面试题库

1. Spark消费 Kafka，分布式的状况下，如何保证消息的顺序 Kafka 分布式的单位是 Partition。如何保证消息有序，须要分几个状况讨论。 同一个 Partition 用一个 write ahead log （WAL）组织，因此能够保证 FIFO 的顺序。 不一样 Partition 之间不能保证顺序。可是绝大多数用户均可以经过 message key 来定义，由于同一个 key

>>阅读原文<<