编辑任务节点


新建节点

新任务创建后,默认为“未上线”状态。根据实际开发需求,可从右侧将所需要使用的节点拖入到中间画布中,并完成节点连线(节点上下游依赖设置),其中需要所有节点都相连,末级节点为和任务同名的虚拟节点。

编辑任务 - 图1

编辑节点

完成节点部署后,双击节点,即可进入节点编辑页面。以SQL节点为例,则可以输入SparkSQL或者HiveSQL。编辑完成后点击临时保存,即可暂时保存该节点。如果此时关闭浏览器,则当前修改不会保存,如果需要保存该修改,则关闭节点弹窗后,需要在任务画布顶部,点击“保存”,即可保存当前任务。

编辑任务 - 图2

删除节点


对于不需要的任务,可以右键删除。

在后续操作中,会说明如何在开发模式下进行“调度设置”,在调度设置时,可配置上下游的依赖关系。如果有下游任务开发模式下任务或节点对当前节点配置了依赖,或当前节点配置了上游依赖,则节点删除时,会进行提醒。

编辑任务 - 图3

禁用节点 & 取消禁用


对于任务提交上线后,整体需要调度,但是其中部分节点不需要的场景,可以在开发模式下,对节点右键,选择禁用节点。节点禁用后,开发模式的节点会被置灰,不可选中运行,在线上模式下也不可再修改状态,且线上调度时也不会被调度执行。

禁用的节点,也可在开发模式下右键,选择取消禁用。

编辑任务 - 图4

编辑资源及配置


单击图标编辑任务 - 图5资源及配置按钮进入配置页面,可进行如下配置:

  • 作业资源:在该页签下可上传当前任务所需要的作业资源,支持对资源的重命名、删除、下载以及查看操作。
  • 资源组:在该页签下,可单击引用资源组按钮引用公共资源组的资源。引用之后,当前任务的代码中可使用其中的资源,当前支持对资源组进行复制路径、查看开发模式资源组、查看线上模式资源组以及删除引用的操作。
  • 参数组:在该页签下,可单击引用参数组按钮引用公共资源组中的公共参数。引用之后,当前任务的代码中可使用其中的参数。
  • 任务配置:如果在新建任务时设置了默认外部数据源则此处会显示已设置的数据源信息。如果在新建任务时未进行设置可在此处通过添加数据源按钮进行添加。
说明:
1. 引用资源组时按照开发模式资源组名称引用,实际任务执行时,可选择引用开发模式或线上模式的资源组。
2. 多个参数组内有相同参数时,系统取排在前面的参数组的参数。