在现代数据处理和工作流管理中,Apache DolphinScheduler 以其强大的调度能力和易用性,成为了许多企业和开发者的首选工具。
本文将深入探讨 DolphinScheduler 的进阶使用技巧,包括参数传递、资源中心管理、告警通知配置,以及如何在真实项目中高效使用 DolphinScheduler。
进阶使用
参数传递
参数传递是 DolphinScheduler 中的一项重要功能,它允许用户在任务之间共享数据。
- 局部变量:仅在单个任务中有效,适用于特定任务的独立配置。
- 全局变量:在多个任务间共享,适合跨任务传递日期、配置等通用信息。
局部变量-只针对单个任务
将工作流上线,执行,查看A的日志,发现打印了。
全局变量-多个任务中都需要一个字段
目前 A\B\C 任务都需要一个变量 dt
。
在保存工作流的时候,弹出来的界面可以指定全局变量。
执行结果:
)
B和C都是打印的2023-7-20,唯独A打印的是2023-7-18
因为A设置了局部变量,当一个任务有局部变量又有全局变量的时候,以局部变量的值为准(就近原则)
日期
Linux中获取前一