Apache DolphinScheduler 4月简报:社区发展与技术革新速递
各位热爱 DolphinScheduler 的小伙伴们,4 月份的 DolphinScheduler 社区月报更新啦!这里将记录 DolphinScheduler 社区每月的重要更新,欢迎关注!
月度 Merge 之星
感谢以下小伙伴 4 月为 Apache DolphinScheduler 所做的精彩贡献(排名不分先后):
@alei1206,@caishunfeng,@qingwli,@sdhzwc,@ruanwenjun,@pegasas,@songwenyong,@privking,@zhongjiajie,@xinxingi,@Gallardot,@abzymeinsjtu,@DaqianLiao,@atjiucheng,@calvinjiang,@xxzuo,@pinkfloyds
apache/dolphinscheduler功能更新及优化
Fix
- [FIX]修复无法恢复已停止实例的问题 @privking
- [Hotfix]修复dsip名称 @ruanwenjun
- [Fix-15866][Doc]更新淘宝npm镜像地址 @xxzuo
- [Bug][Helm]修复 image.registry @Gallardot
- [Bug]在初始化模式下,QUARTZ表的顺序不正确。 @ruanwenjun
- [Fix-15706]SeaTunnel的优化 @xinxingi
- [Fix-15787]重用代码,解决...中复杂SQL解析异常的问题。 @xinxingi
- [Bug] [Common]修复common.properties中的拼写错误 @pegasas
- [Fix]将cpuUsage拆分为systemCpuUsage和jvmCpuUsage。 @ruanwenjun
- [Bug]修复依赖任务逻辑 @abzymeinsjtu
Improve
- [Improvement-15919][datasource]优化数据源获取名称 @sdhzwc
- [Improvement-15910][UI]假设在并行执行模式下,应为自定义并行度提供一个默认值。 @calvinjiang
- [Improvement]修复警报代码异味 @qingwli
- [Improvement][Audit]将时间改为创建时间 @qingwli
- [Improvement][Api]删除无用的batchUpdateUdfFunc方法 @qingwli
- [Improvement]将python-gateway的默认设置改为false。 @pinkfloyds
- [Improvement]检查异常字符 @pinkfloyds
- [Improve]修正
ProcessServiceImpl中的拼写错误 @qingwli - [improvement-15760][datasource-plugin]修复SQL任务拆分错误#15760 @songwenyong
- [Improvement]添加完整资源名称检查 @caishunfeng
- [Improvement-15744][parameter]项目参数添加更新时间及更新用户ID @sdhzwc
- [Improvement-15713][api]数据源和UDF函数的列表查询应使用枚举代码值,而不是顺序号。 @songwenyong
- [Improvement][Spark]支持本地Spark集群 @pegasas
Others
- [TEST]增加项目偏好的服务测试覆盖率 @abzymeinsjtu
- [DSIP-34]将 required_approving_review_count 设置为 2 @ruanwenjun
- 并发修复自动创建tennant可能会导致任务失败。 @ruanwenjun
- 在Java任务中,jar路径不正确。 @ruanwenjun
- [TEST]增加项目参数服务测试的覆盖率 @abzymeinsjtu
- 使用workerNodeInfoWriteLock更新工作节点信息 @DaqianLiao
- [DSIP-32][Master]为master拉取命令添加获取策略 @ruanwenjun
- 修复 kill 动态任务不会终止等待运行的工作流实例 @ruanwenjun
- [DSIP-31]减少Hikari连接池的大小 @ruanwenjun
- 修复了queryByTypeAndJobId可能因返回结果过多而引发的错误。 @ruanwenjun
- 重構記錄审计日志的邏輯 @qingwli
- [DSIP-28]不要扫描classpath下的整个项目bean。 @ruanwenjun
- 添加DSIP模版 @ruanwenjun
- [TEST]增加日志服务的覆盖率 @abzymeinsjtu
- 修复写入审计日志的错误会导致请求失败。 @ruanwenjun
- 修复 JDBC 注册表无法工作。 @ruanwenjun
- 将SSH心跳类型更改为.IGNORE @ruanwenjun
- Apache SeaTunnel中,禁止在运行中的工作流实例中强制完成任务实例。 @ruanwenjun
- 将进程ID绑定到CodeGenerator的构建过程中 @ruanwenjun
- 修复ErrorCommand在Command中丢失了一些字段 @ruanwenjun
- [TEST]增加环境服务的覆盖范围 @abzymeinsjtu
- 移除未使用的咖啡因缓存 @ruanwenjun
- 无法构建StreamingTaskTriggerResponse的实例。 @atjiucheng
- [TEST]增加数据源服务的覆盖范围 @abzymeinsjtu
- [TEST]预警插件实例服务的覆盖率增加 @abzymeinsjtu
- 从dolphinscheduler-task-dataquality中移除dolphinscheduler-data-quality @ruanwenjun
- 直接使用Quartz的API来初始化一个调度任务。 @ruanwenjun
- [DSIP-24][RemoteLogging]支持 AbsRemoteLogHandler @pegasas
- [Worker]修复了一个问题,即在停止远程shell任务时,不会意外杀死远端的子进程#15570 @alei1206
- [DSIP-26][Audit log]审计日志改进设计 @qingwli
apache/dolphinscheduler-sdk-python仓库功能更新与优化
- 这个问题与Apache SeaTunnel的兼容性和最新版本有关。 @zhongjiajie
- [ 这个问题是关于更新 setup-python 时遇到不支持的版本。在中文中,这可以表示为:"遇到 setup-python 不支持的旧版本,需要更新。" ]( https://github.com/apache/dolphinscheduler-sdk-python/pull/143 " 这个问题是关于更新 setup-python 时遇到不支持的版本。在中文中,这可以表示为:"遇到 setup-python 不支持的旧版本,需要更新。" ") @zhongjiajie
apache/dolphinscheduler-website
Improve
- [Improvement]添加建议使用的稳定版本 @xxzuo
本文由 白鲸开源 提供发布支持!
Apache DolphinScheduler 4月简报:社区发展与技术革新速递的更多相关文章
- 感谢有你!Apache DolphinScheduler 项目 GitHub star 突破 8k
本周伊始,Apache DolphinScheduler 项目在 GitHub 上的 Github Star 总数首次突破 8K.目前,Apache DolphinScheduler 社区已经拥有 C ...
- 金融任务实例实时、离线跑批Apache DolphinScheduler在新网银行的三大场景与五大优化
在新网银行,每天都有大量的任务实例产生,其中实时任务占据多数.为了更好地处理任务实例,新网银行在综合考虑之后,选择使用 Apache DolphinScheduler 来完成这项挑战.如今,新网银行多 ...
- Apache DolphinScheduler 2.X保姆级源码解析,中国移动工程师揭秘服务调度启动全流程
2022年1月,科学技术部高新技术司副司长梅建平在"第六届中国新金融高峰论坛"上表示,当前数据量已经大大超过了处理能力的上限,若信息技术仍然是渐进式发展,则数据处理能力的提升将远远 ...
- 中国联通改造 Apache DolphinScheduler 资源中心,实现计费环境跨集群调用与数据脚本一站式访问
截止2022年,中国联通用户规模达到4.6亿,占据了全中国人口的30%,随着5G的推广普及,运营商IT系统普遍面临着海量用户.海量话单.多样化业务.组网模式等一系列变革的冲击. 当前,联通每天处理话单 ...
- 新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.4 发布,推荐下载
| 本文编辑:朱桐 新一代大数据任务调度 - Apache DolphinScheduler(incubator) 在经过社区 30 多位小伙伴的贡献与努力下于发布了 1.3.4 版本,1.3.4 作 ...
- Apache DolphinScheduler 迎来 2 位 PPMC
经过 Apache DolphinScheduler PPMC 们的推荐和投票,我们高兴的宣布:Apache DolphinScheduler 迎来了 2 位 PPMC .他们是(github id) ...
- 金秋十月 - Apache DolphinScheduler 收获 2 位新 Committer
点击上方蓝字关注 Apache DolphinScheduler Apache DolphinScheduler(incubating),简称"DS", 中文名 "海豚调 ...
- 金灿灿的季节 - Apache DolphinScheduler收获5位新Committer
在这个金灿灿的收获季节,经过 Apache DolphinScheduler PPMC 们的推荐和投票,Apache DolphinScheduler 收获了 5 位新Committer .他们是:n ...
- Apache DolphinScheduler&ShenYu(Incubating) 联合 Meetup,暖春 3 月与你相约!
云霞出海曙,梅柳渡江春. 2022 年的早春在疫情中显得格外生机勃勃,虽然接下来寒流仍有可能造访国内部分地区,但开源的世界,早已热闹非凡! 2022 年 3 月 26 日(星期六), Apache D ...
- Apache DolphinScheduler 社区呼唤志愿者
DolphinScheduler是什么? Apache DolphinScheduler 是一个分布式.易扩展并带有强大的可视化界面的大数据工作流调度系统. 2021 年 03 月 18 日正式成为 ...
随机推荐
- 使用shell脚本在Linux中管理Java应用程序
目录 前言 一.目录结构 二.脚本实现 1. 脚本内容 2. 使用说明 2.1 配置脚本 2.2 脚本部署 2.3 操作你的Java应用 总结 前言 在日常开发和运维工作中,管理基于Java的应用程序 ...
- springcloud之FeignClient访问微服务接口缓慢
springcloud之FeignClient访问微服务接口缓慢查询服务日志报错如下:Caused by: java.net.SocketTimeoutException: Read timed ou ...
- linux安装redis完整步骤
linux安装redis完整步骤 安装:1.获取redis资源 wget http://download.redis.io/releases/redis-4.0.8.tar.gz 2.解压 tar x ...
- CSV文件存储
CSV 文件存储 CSV,全称为 Comma-Separated Values,中文可以叫作逗号分隔值或字符分隔值,其文件以纯文本形式存储表格数据.该文件是一个字符序列,可以由任意数目的记录组成,记录 ...
- 如何搭建私有的ChatGPT服务
背景 是这样的,我们几个朋友众筹共享一个chatGPT4 Plus账号,且不想多人公用一个账号登录使用web版,想大家各自搞个本地的ChatGPT客户端,共用一个api-key. 我找了一圈,决定使用 ...
- [OC]一个括号新建一个类
[OC]一个括号新建一个类 特别说明 以下代码仅仅用于说明用途,命名也不是特别规范,小朋友不要模仿哦. 前言 在iOS开发中,我们会经常用到这么一段代码: UIView *myView = [UIVi ...
- opencv在MAC下的安装
版本信息 MAC版本:10.10.5 Xcode版本:7.2 openCV版本:2.4.13 安装步骤: 联网 安装brew,在终端输入指令 /usr/bin/ruby -e "$(curl ...
- 小白也能懂的Mysql数据库索引详解
核心概念 主键索引/二级索引 聚簇索引/非聚簇索引 回表/索引覆盖 索引下推 联合索引/最左联合匹配 前缀索引 explain 一.[索引定义] 1.索引定义 在数据之外,数据库系统还维护着满足特定查 ...
- nginx面试题及答案
什么是nginx? Nginx是一个高性能的HTTP和反向代理服务器,也是一个IMAP/POP3/SMTP服务器 Nginx是一款轻量级的Web服务器/反向代理服务器及电子邮件(IMAP/POP3)代 ...
- C#事件总结(二)
续接上一篇文<C#事件总结>,那是通过一个结合例子的文字描述,接下来我将通过图文形式展现. 现在VS开发环境中看看事件是什么样子的: 再来看看我的笔记,希望对你的理解有帮助. 哦,顺便提醒 ...