任务查询

涉及该操作的功能权限:离线任务的查看

离线同步任务页面中,当前支持对任务名称来源信息去向信息的内容进行模糊匹配。其中,来源信息去向信息支持库名或表名的模糊匹配。

当任务提交上线后可在线上任务界面中查看任务的运行结果,在更多列表中点击运行结果按钮,可以查看详情,详情包含读取总行数开始时间结束时间调用来源

基本信息 说明
读取总行数 显示每⼀次读取的数据量
开始/结束时间 任务启动运行与结束时间
调用来源 触发同步任务的模块

注意:数据来源为FTP或HDFS且读取方式为非结构化时,运行结果中展示读取总数据量而非读取总行数。

任务管理

以下的操作需要首先在安全中心的【权限管理-功能权限】中添加数据传输离线任务的功能权限。

引用详情

涉及该操作的功能权限:离线任务的查看

在线上任务列表中,单击更多按钮,选择引用详情,可以查看任务引用情况。引用详情包含内容如下:

  • 离线任务名称:引用数据同步任务的离线开发任务的名称。
  • 引用的节点:引用节点的名称、所属的任务及模式、创建人,其中模式包括开发模式和线上模式。

任务下线

涉及该操作的功能权限:离线任务的查看以及运行&上线&下线

在线上任务列表中,单击下线按钮可对任务进行下线,需要注意的是任务下线前需要确认任务没有被引用,否则无法下线该任务。下线任务操作只会删除线上任务,任务管理中对应的记录将仍然保存。

任务复制

涉及该操作的功能权限:离线任务的查看以及复制

数据传输支持任务复制功能,能够通过复制快速的新建一个已存在的任务。具体步骤如下:
1.在任务管理列表中,单击更多按钮,选择复制
2.在弹出的对话框中,填写任务名称,单击复制,完成任务的创建。

注意:任务名称要求中英文开头,支持连字符(-)或下划线(_),长度不超过128个字符。

任务批量导入导出

涉及该操作的功能权限:离线任务的查看新建以及导出。其中,导入受新建权限控制。

当前数据传输支持离线同步任务的批量导入和导出,点击批量导出或者批量导入任务完成相应的操作。

需要注意的是,当进行导入操作时,会对导入任务做如下处理:

  1. 将任务负责人替换为目标端导入任务的用户。
  2. 如果读写的数据源包含:{项目}-{集群}Hive/Iceberg数据源,导入任务时将“{导出项目名称}-{导出集群名称}Hive/Iceberg数据源” 替换为“{导入项目名称}-{导入集群名称}Hive数据源”。(针对Hive/Iceberg数据源会携带项目-集群的名称一起导出导入)
  3. 引用的参数组、数据源、脱敏规则都替换为目标端同名参数组、数据源、脱敏规则。