思否开源项目推介丨MQTT X:跨平台 MQTT 5.0 客户端工具

开源项目名称:Apache Pulsar
开源项目简介:下一代云原生分布式消息流平台
开源项目类型:Apache 软件基金会顶级项目
项目建立时间:2018 年 9 月 25 日从 Apache 软件基金会正式毕业,成为顶级项目 GitHub 数据:6.6K Star,1.6K Fork
GitHub 地址: https://github.com/apache/pulsar

项目介绍

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。该系统源于 Yahoo,最初在 Yahoo 内部开发和部署,支持 Yahoo 应用服务平台 140 万个主题,日处理超过 1000 亿条消息。git

Pulsar 于 2016 年由 Yahoo 开源并捐赠给 Apache 软件基金会进行孵化,2018 年成为 Apache 软件基金会顶级项目。Apache Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具备强一致性、高吞吐、低延时以及高可扩展流数据存储特性。github

与大多数消息传递系统的单片架构不一样,Pulsar 采用分层分片式的架构,服务层和存储层都可以独立扩展,以提供更好的性能、可扩展性和灵活性,这种设计对容器很是友好,使得 Pulsar 成为流原平生台的理想选择。apache

Pulsar 的企业特性包括消息的持久化存储、多租户、多机房互联互备、加密和安全性等。Pulsar 提供和 Kafka 兼容的 API,以及 Kafka-On-Pulsar(KoP) 组件来兼容 Kafka 的应用程序。KoP 在 Pulsar Broker 中解析 Kafka 协议,用户不用改动客户端的任何 Kafka 代码就能直接使用 Pulsar。segmentfault

在消息领域,Pulsar 是第一个将存储计算分离云原生架构落地的开源项目。除了存储计算的分层架构,Pulsar 系统中的节点对等、大集群管理带来的资源池化、高可用特性带来的系统弹性等和云原生的理念十分契合。安全

团队介绍

StreamNative 是一家开源基础软件公司,由 Apache 顶级项目 Apache Pulsar 、Apache BookKeeper 原生核心开发者组建而成,围绕 Apache Pulsar 及 Apache BookKeeper 打造下一代流数据平台。SteamNative 做为 Apache Pulsar 的商业支持公司,专一于开源生态和社区构建,致力于前沿技术领域的创新,创始团队成员曾就任于 Yahoo、Twitter、EMC 等知名大公司。网络

公司建立于 2019 年,创立初期即得到红杉中国种子基金天使轮投资,在近期已完成数百万美圆的 Pre-A 轮融资,本轮融资由源码资本领投、红杉中国种子基金跟投。架构

项目自荐

消息系统做为大数据平台基础设施组件,对于构建大数据应用程序尤为关键。Apache Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具备强一致性、高吞吐以及低延时的高可扩展流数据存储特性,解决了目前流行消息系统如 Kafka 等在诸多场景遇到的技术瓶颈,而且能够大大下降 IT 设施投入、简化运维操做,提高稳定性,助力业务发展。运维

目前 Apache Pulsar 正在快速发展,全球贡献者已超过 300 位,已有众多国内外大型互联网和传统行业公司采用 Apache Pulsar,使用案例分布在人工智能、金融、电信运营商、直播与短视频、物联网、零售与电子商务、在线教育等多个行业,如美国有线电视网络巨头Comcast、Yahoo!、腾讯、中国电信、中国移动、BIGO、VIPKID 等,发展潜力空间巨大。分布式

思否推荐

Pulsar 做为企业级的下一代分布式消息系统,随着开源后,Pulsar 也再也不只是中间件的功能,而是慢慢发展成为一个 Event Streaming Platform(事件流处理平台),具备 Connect(链接)、Store(存储)和 Process(处理)功能。且 Pulsar 特有的分层分片的架构,在保证大数据消息流系统的性能和吞吐量的同时,也提供了高可用性、高可扩展性和易维护性。分片架构将消息流数据的存储粒度从分区拉低到了分片,以及相应的层级化存储,使 Pulsar 成为 unbounded streaming data storage 的不二之选。这使得 Pulsar 能够更完美地匹配和适配 Flink 的批流一体的计算模式。函数

segmentfault 思否

该项目已入选「SFOSSP - 思否开源项目支持计划」,咱们但愿借助社区的资源对开源项目进行相关的宣传推广,并做为一个长期项目助力开源事业的发展,与广大开发者共建开源新生态。

有意向的开源项目负责人或团队成员,可经过邮箱提供相应的信息(开源项目地址、项目介绍、团队介绍、联系方式等),以便提高交流的效率。

联系邮箱:pr@segmentfault.com

segmentfault 思否

相关文章
相关标签/搜索