数据开发流程
数据开发流程和节点任务创建、运行和运维流程如下:
进入项目空间后,点击左上角logo选择数据开发菜单。
1.点击“新建”按钮,选择业务流程
2.在 新建业务流程 对话框中,填写 业务流程名称 和 描述。点击“新建”,即在业务流程的对象树下生成一个全新的业务流程。
3.在业务流程下,选择需要创建的节点类型拖到流程画布中,设置节点的名称和配置内容。节点类型支持采集节点、SQL开发节点 和 同步节点 。
4.节点配置完成后,选择节点间的上下游依赖关系进行连线,形成DAG图。单击顶部 运行按钮测试运行,会按照节点先后顺序依次执行,并打印行日志。
5.执行无误后,提交发布为正式生产。在流程编辑页面顶部工具栏单击发布,选择要发布的节点(不能仅提交虚拟节点或者无数据输出节点)。
所有选择的节点必须提交成功后,此次开发流程的提交才算成功。业务流程每发布一次会自动升级版本号,后续可以通过版本号查看对应版本的DAG详情。
6.开发流程提交成功后会在运维中心自动创建一条生产流程记录。
单击流程编辑界面顶部工具栏的 运维中心 可以直接进入运维界面查看到该生产流程的实例列表。也可以通过运维中心-生产流程-搜索对应开发流程名称查看。
7.运维中心的生产流程界面,可以查看实例运行情况和日志,或者手动执行运行流程的操作。
8.配置生产流程的调度。单击开发流程编辑区域右侧的 调度配置 ,即可进入 调度配置 页面。调度方案分为依赖周期定时调度 和 依赖上游流程或者节点调度。依赖周期定时调度需要配置执行频率和执行时间;依赖上游流程调度需要选择已发布的流程,作为上游依赖。