任务查询及管理
更新时间: 2024-12-04 15:41:58
任务查询
涉及该操作的功能权限:离线任务的查看。 |
在离线同步任务页面中,当前支持对任务名称、来源信息、去向信息的内容进行模糊匹配。其中,来源信息和去向信息支持库名或表名的模糊匹配。
当任务提交上线后可在线上任务界面中查看任务的运行结果,在更多列表中点击运行结果按钮,可以查看详情,详情包含读取总行数、开始时间、结束时间、调用来源:
基本信息 | 说明 |
---|---|
读取总行数 | 显示每⼀次读取的数据量 |
开始/结束时间 | 任务启动运行与结束时间 |
调用来源 | 触发同步任务的模块 |
注意:数据来源为FTP或HDFS且读取方式为非结构化时,运行结果中展示读取总数据量而非读取总行数。 |
任务管理
以下的操作需要首先在安全中心的【权限管理-功能权限】中添加数据传输离线任务的功能权限。
引用详情
涉及该操作的功能权限:离线任务的查看。 |
在线上任务列表中,单击更多按钮,选择引用详情,可以查看任务引用情况。引用详情包含内容如下:
- 离线任务名称:引用数据同步任务的离线开发任务的名称。
- 引用的节点:引用节点的名称、所属的任务及模式、创建人,其中模式包括开发模式和线上模式。
任务下线
涉及该操作的功能权限:离线任务的查看以及运行&上线&下线。 |
在线上任务列表中,单击下线按钮可对任务进行下线,需要注意的是任务下线前需要确认任务没有被引用,否则无法下线该任务。下线任务操作只会删除线上任务,任务管理中对应的记录将仍然保存。
任务复制
涉及该操作的功能权限:离线任务的查看以及复制。 |
数据传输支持任务复制功能,能够通过复制快速的新建一个已存在的任务。具体步骤如下:
1.在任务管理列表中,单击更多按钮,选择复制;
2.在弹出的对话框中,填写任务名称,单击复制,完成任务的创建。
注意:任务名称要求中英文开头,支持连字符(-)或下划线(_),长度不超过128个字符。 |
任务批量导入导出
涉及该操作的功能权限:离线任务的查看、新建以及导出。其中,导入受新建权限控制。 |
当前数据传输支持离线同步任务的批量导入和导出,点击批量导出或者批量导入任务完成相应的操作。
需要注意的是,当进行导入操作时,会对导入任务做如下处理:
- 将任务负责人替换为目标端导入任务的用户。
- 如果读写的数据源包含:{项目}-{集群}Hive/Iceberg数据源,导入任务时将“{导出项目名称}-{导出集群名称}Hive/Iceberg数据源” 替换为“{导入项目名称}-{导入集群名称}Hive数据源”。(针对Hive/Iceberg数据源会携带项目-集群的名称一起导出导入)
- 引用的参数组、数据源、脱敏规则都替换为目标端同名参数组、数据源、脱敏规则。