点击上方“开源社”关注咱们apache
各位 DolphinScheduler 和 Pulsar 社区的小伙伴们,Apache DolphinScheduler x Pulsar 在线 Meetup 来啦!
微信

大数据任务调度、消息流的订阅与分发都是大数据建设中极其重要的 “基础设施”。高稳定高可用是对基础设施的基本要求,在这样的背景下,涌现了不少优秀的开源项目。架构
以 Apache 软件基金会下的开源项目 Apache DolphinScheduler(Incubating)、Apache Pulsar 为表明,DolphinScheduler 目前已经有近 400 家公司使用,120 多位社区贡献者,7 个微信用户群,Pulsar 社区更是有 300 多位贡献者的大社区。app
更可喜的是,这 2 个项目均在中国有大量的开发者,这也会在分布式工做流任务调度、分布式消息流平台两个方向给广大的大数据用户提供更好的交流空间和帮助。编辑器
本次在线 Meetup,咱们也有幸邀请到了 DolphinScheduler、Pulsar 两个开源项目的开发者与实践者来分享他们的最佳经验。分布式
关于 Apache DolphinScheduler:函数
Apache DolphinScheduler(Incubating) 是一个分布式去中心化、易扩展的可视化工做流任务调度系统,致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在大数据处理流程中开箱即用。DolphinScheduler 源于易观,目前已捐赠给 Apache 软件基金会,正在进行孵化中,预计明年初提请毕业。性能
🔗 官网:https://dolphinscheduler.apache.org大数据
关于 Apache Pulsar:flex
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。该系统源于Yahoo,最初在 Yahoo 内部开发和部署,支持 Yahoo 应用服务平台 140 万个主题,日处理超过 1000 亿条消息。Pulsar 于 2016 年由 Yahoo 开源并捐赠给 Apache 软件基金会进行孵化,2018 年成为 Apache 软件基金会顶级项目。Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具备强一致性、高吞吐、低延时以及高可扩展流数据存储特性。
🔗 官网:http://pulsar.apache.org
🕙 活动时间:9 月 5 日,周六下午2点
📅 分享日程:
时间 | 题目 |
14:00 - 14:40 | 《 Introduction to Apache Pulsar》 |
14:40 - 15:20 | 《DolphinScheduler 与工业互联网平台 xIn3Plat 牵手之路》 |
15:20 - 16:00 | 《BIGO 在 Apache Pulsar 上的实践》 |
16:00 - 16:40 | 《DolphinScheduler 功能深度解析》 |
16:40 - 17:00 | 问答环节与自由讨论 |
🎙️ 议题详情
>>> Introduction to Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。Pulsar 于 2016 年由 Yahoo 开源并捐赠给 Apache 软件基金会进行孵化,2018 年成为Apache 软件基金会顶级项目。
Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具备强一致性、高吞吐以及低延时的高可扩展流数据存储特性。本次分享将介绍 Apache Pulsar 的功能特性,及社区参与、将来发展等内容。
>>> DolphinScheduler 与工业互联网平台 xIn3Plat 牵手之路
介绍如何将 DolphinScheduler 融入宝信软件 xIn3Plat 所作的功能加强和适应性改造,包括:DolphinScheduler 在多数据源集成、并行任务控制、审计告警、插件扩展性等方面的关键特性;以及咱们后续的社区参与计划及将来功能规划,与社区一块儿推进 DolphinScheduler 的发展。
>>> BIGO 在 Apache Pulsar 上的实践
主要介绍 BIGO 引入 Pulsar 的初衷、Pulsar 性能调优上的实践,以及 Flink 与 Pulsar 结合在 BIGO 实时数据处理上的应用。
鲍亮,易观大数据平台专家、DolphinScheduler PPMC
重点分享 DolphinScheduler 关于无中心架构的容错设计,工做流及任务状态切换、任务组件的功能设计以及版本升级的兼容设计以及您可能从未注意到的高级功能等
本次活动,特别感谢开源社、SegmentFault 、示说网的大力支持。目前咱们已开启报名,活动开始前会在群内发布直播地址,欢迎扫码入群,与社区大咖共同交流!
咱们会在群内分享直播连接,记得加入哦!
开源社简介
开源社是由国内外支持开源的企业,社区及我的,依“贡献,共识,共治”原则,所组织的厂商中立、纯志愿者、非营利的开源联盟,旨在共创健康可持续发展的开源生态体系,并推进中国开源社区成为全球开源软件的积极参与及贡献者。咱们专一于开源治理、国际接轨、社区发展和开源项目。
相关阅读 | Related Reading
2020 中国开源年会(COSCon'20)再启程:开源向善(Open Source for Good)
「开源是世界的」关于所谓“开源断供”咱们有话说
Apache Flink 李钰:“作中文社区首先最须要解决的问题,是把入门的门槛下降”

本文分享自微信公众号 - 开源社(kaiyuanshe)。
若有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一块儿分享。