关于 Apache DolphinScheduler:

Apache DolphinScheduler(Incubating) 是一个分布式去中心化、易扩展的可视化工作流任务调度系统,致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在大数据处理流程中开箱即用。DolphinScheduler 源于易观,目前已捐赠给 Apache 软件基金会,正在进行孵化中,预计明年初提请毕业。

???? 官网:https://dolphinscheduler.apache.org

关于 Apache Pulsar:

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。该系统源于 Yahoo,最初在 Yahoo 内部开发和部署,支持 Yahoo 应用服务平台 140 万个主题,日处理超过 1000 亿条消息。Pulsar 于 2016 年由 Yahoo 开源并捐赠给 Apache 软件基金会进行孵化,2018 年成为 Apache 软件基金会顶级项目。Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时以及高可扩展流数据存储特性。

???? 官网:http://pulsar.apache.org

各位 DolphinScheduler 和 Pulsar 社区小伙伴们,在线 Meetup 活动回顾资料来啦!

DolphinScheduler 作为 Apache 软件基金会孵化项目,目前已有 120 多位贡献者;Pulsar 作为 Apache 软件基金会顶级项目,全球已有 300 多位贡献者。这两个项目在中国有大量的开发者和贡献者与用户,本次活动为大家提供了广阔交流空间。

本次活动成功聚集了 200+ 小伙伴,直播观看人次突破 1000+。本次活动顺利举办,特别感谢来自 DolphinScheduler、Pulsar 社区的分享嘉宾——翟佳、刘慧娟、陈航、鲍亮,他们为此做了充分准备。同时,也特别感谢社区合作伙伴——开源社、SegmentFault 、示说网的大力支持。

下面对本次活动做简单回顾,方便大家参考。

细节回顾

????️ Introduction to Apache Pulsar

翟佳,Apache Pulsar PMC 成员,StreamNative 联合创始人兼 CTO

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。Pulsar 于 2016 年由 Yahoo 开源并捐赠给 Apache 软件基金会进行孵化,2018 年成为 Apache 软件基金会顶级项目。Pulsar 采用计算与存储分离的分层架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐以及低延时的高可扩展流数据存储特性。本次分享将介绍 Apache Pulsar 的功能特性,及社区参与、未来发展等内容。

左右滑动查看更多

PPT 查看/下载地址:

https://www.slidestalk.com/DolphinScheduler/Apache_Pulsar_Introduction_20200905

????️ DolphinScheduler 与工业互联网平台 xIn3Plat 牵手之路

刘慧娟,宝信工业互联网研究院, 大数据中心开发经理,负责工业互联网平台 xIn3Plat 之 5S 大数据套件分布式计算引擎和调度研发工作。

介绍如何将 DolphinScheduler 融入宝信软件 xIn3Plat 所做的功能增强和适应性改造,包括:DolphinScheduler 在多数据源集成、并行任务控制、审计告警、插件扩展性等方面的关键特性;以及我们后续的社区参与计划及未来功能规划,与社区一起推动 DolphinScheduler 的发展。

左右滑动查看更多

PPT 查看/下载地址:
https://www.slidestalk.com/DolphinScheduler/DolphinSchedulerxIn3Plat62248

????️ BIGO 在 Apache Pulsar 上的实践

陈航, BIGO 大数据平台消息系统负责人,Apache Pulsar & BookKeeper Contributor

主要介绍 BIGO 引入 Pulsar 的初衷、Pulsar 性能调优上的实践,以及 Flink 与 Pulsar 结合在 BIGO 实时数据处理上的应用。

左右滑动查看更多

PPT 查看/下载地址:
https://www.slidestalk.com/DolphinScheduler/ApachePulsarBIGO87668

????️ DolphinScheduler 功能深度解析

鲍亮,易观大数据平台专家、DolphinScheduler PPMC

重点分享 DolphinScheduler 关于无中心架构的容错设计,工作流及任务状态切换、任务组件的功能设计以及版本升级的兼容设计以及您可能从未注意到的高级功能等。

左右滑动查看更多

PPT 查看/下载地址:

https://www.slidestalk.com/DolphinScheduler/DolphinScheduler20200905

参与贡献

目前 DolphinScheduler 与 Pulsar 正在快速成长之中,欢迎对此感兴趣的加入到项目贡献中来,可访问官网查看参与指南。

DolphinScheduler 官网:
https://dolphinscheduler.apache.org

Apache Pulsar 官网:
http://pulsar.apache.org

他们正在使用DolphinScheduler(仅部分)

目前已经有400多家公司在使用DolphinScheduler,试用用户也已经超过1000个,用户群超过3000人。如果您正在进行大数据任务调度的选型,欢迎对比呐!

最后还是想呼唤已经在使用DolphinScheduler的伙伴能分享自己的实践经验呐,每一次分享都是经验的传承,既可以让其他小伙伴少走弯路,也是对社区的极大的支持,社区不仅需要用户、开发者,也需要   有意向分享的伙伴欢迎联系微信: 510570367

戳原文,立刻奔向

DolphinScheduler 
的 github 仓库一起玩耍,不妨点 star 收藏吆~

活动回顾|Apache DolphinScheduler x Pulsar 在线 Meetup的更多相关文章

  1. 活动报名|对话贡献者:DolphinScheduler x Pulsar 在线 Meetup

    各位 DolphinScheduler 和 Pulsar 社区的小伙伴们,Apache DolphinScheduler x Pulsar 在线 Meetup 来啦! 导语 大数据任务调度.消息流的订 ...

  2. 活动回顾丨ALC Beijing 首场 Meetup:《开源到底有多难?》

    8月16日,ALC Beijing 的首次线下沙龙活动 -- <开源到底有多难?>在微软大厦如期举行.本次沙龙主要是分享开源开发经验.探讨如何让开源项目更加茁壮成长,以及分享 ASF 管理 ...

  3. Apache DolphinScheduler 3.0.0 正式版发布!

    ​  点亮 ️ Star · 照亮开源之路 GitHub:https://github.com/apache/dolphinscheduler   ​ 版本发布 2022/8/10 2022 年 8 ...

  4. 笃情开源:我和 Apache DolphinScheduler 社区的故事

    背景 本文的主人翁是 2 次飞机参会现场交流,四天研究就把 DolphinScheduler 用上生产的来自车联网行业的大数据 boy - 黄立同学.怎么样,听起来是不是有点 crazy?下面就来看看 ...

  5. 本周六 Apache DolphinScheduler & Doris 将联合线上 Meetup

    活动背景 2020年,大数据成为国家基建的一个重要组成,大数据在越来越多的领域展现威力.随着大数据的应用场景越来越多,大家对数据的响应速度和数据加工工作流的方便程度也提出了更高的要求.在这种背景下,相 ...

  6. Apache DolphinScheduler&TiDB联合Meetup | 聚焦开源生态发展下的应用开发能力

    在软件开发领域有一个流行的原则:Don't Repeat Yourself(DRY),翻译过来就是:不要重复造轮子.而开源项目最基本的目的,其实就是为了不让大家重复造轮子. 尤其是在大数据这样一个高速 ...

  7. Apache DolphinScheduler&ShenYu(Incubating) 联合 Meetup,暖春 3 月与你相约!

    云霞出海曙,梅柳渡江春. 2022 年的早春在疫情中显得格外生机勃勃,虽然接下来寒流仍有可能造访国内部分地区,但开源的世界,早已热闹非凡! 2022 年 3 月 26 日(星期六), Apache D ...

  8. Apache DolphinScheduler & Doris 将于本周六联合进行线上 Meetup

    01 - 活动介绍 2020年,大数据成为国家基建的一个重要组成,大数据在越来越多的领域展现威力.随着大数据的应用场景越来越多,大家对数据的响应速度和数据加工工作流的方便程度也提出了更高的要求.在这种 ...

  9. 就在明天,Apache DolphinScheduler Meetup 2021 如约而至!

    点击上方 蓝字关注我们 社区的小伙伴们,Apache DolphinScheduler Meetup 2021 如约而至,就在明天,等你来玩! 在此次 Meetup 线上直播中,不仅将有来自 Bigo ...

随机推荐

  1. 如何使用picGo+typora配置云笔记

    PicGo的使用 安装 picGo 2.3版本 (window可用)---官网有点慢,已经下载到个人仓库 https://gitee.com/lht1132950411/study/blob/mast ...

  2. jeecgboot-vue3笔记(九)——treeSelect树形选择组件的使用(异步加载)

    使用效果 初始化加载顶层节点,点击各层的>加载该节点的子节点,加载后>标识去除不再重复加载. 前端代码 vue ant-design组件 tree-data,树节点,children方式或 ...

  3. 大数据分析VMWare虚拟机centos系统下配置网络参数

    最近搞大数据方面的数据,通过网上视频学习和自己实践,有些不成文的实践就零碎的记录在此吧. 系统也可安装CentOS DVD版. 1.先进入配置文件,并查看基本情况,如下: 2.用vi编辑器打开物理网卡 ...

  4. 2021.06.19【NOIP提高B组】模拟 总结

    T1 题意:有 \(n\) 个点,有 \(m\) 条边,每次加入一条到图中 问每个点的度数大于零且都是偶数的子图的个数 考试直接判断两点是否出现,出现则更新 其实只要改成并查集判断即可 原理:其实就是 ...

  5. 最短路之 Dijkstra 算法

    普通的 Dijkstra 这是一种运用贪心的单源最短路算法,就是求从一个节点出发,到任意一个点的最短距离 首先我们要一个图 假设要求从 1 开始的单源最短路 dis[] 表示最短路数组, vis[] ...

  6. React Suspense 尝鲜,处理前后端IO异步操作

    简单介绍一下Suspense Suspense主要用来解决网络IO问题,它早在2018年的React 16.6.0版本中就已发布.它的相关用法有些已经比较成熟,有的相对不太稳定,甚至经历了重命名.删除 ...

  7. JS:in语法

    1.应用于判断对象中是否有某一个成员 var obj = { name: "lili", age:10, gender:"girl" } console.log ...

  8. JavaScript与Node.js一起打造一款聊天App

    聊天是我们人与人交流最直接的方式,互联网的加入使我们交流更加便捷.我们手机上的微信.QQ是我们手机必不可少的应用软件.那么,我们是否可以做一款聊天应用呢? 之前我自己闲着没事,研究过一些技术,做了一款 ...

  9. SAP 实例 9 Text output

    REPORT demo_show_text. CLASS demo DEFINITION. PUBLIC SECTION. CLASS-METHODS main. ENDCLASS. CLASS de ...

  10. Deep Learning-深度学习(二)

    深度学习入门 1.随机梯度下降 在之前的学习过程当中,对于损失函数的最为重要的参数的梯度的更新是基于数据集中的所有数据,每一个数据都会进行到计算过程当中去,在本案例中,因为波士顿房价预测这个案例所涉及 ...