元数据采集页面支持采集任务的创建以及采集实例监控的管理。项目组负责人、项目组管理员以及具有采集任务和采集任务实例功能权限的用户支持在该页面中进行操作。

说明:当前元数据采集数据源类型支持Hive、MySQL、Oracle、Vertica、SQLServer。

采集任务管理

采集任务管理页面支持采集任务的新建、删除和编辑操作。

新建采集任务步骤如下:

  • 采集任务管理页面,点击新建采集任务按钮。
    元数据采集 - 图1

  • 填写任务的基本信息,包括采集任务名称、任务描述、任务分组、负责人、采集后的表归属目录以及采集任务。
    元数据采集 - 图2

如果选择了归属目录,则采集完成后的表将会自动归属到该目录下。后续可以在元数据注册页面根据目录快速筛选出已采集的表,并且表的基本信息中也会带有此目录的信息。同时还支持将采集后的表中文名称默认为表备注。

此外,元数据采集还支持邮件报警。如果元数据采集失败,会根据设置的接收人名单收对应的报警邮件通知。

  • 选择采集范围步骤中完成表的圈选。
    元数据采集 - 图3

  • 设置采集类型和采集周期。采集类型包括定时采集和手工采集两种,定时采集支持采集周期设置,当前支持小时、天、周;手工采集只采集一次支持立即采集和自定义时间采集。
    元数据采集 - 图4

创建完成后的任务可在任务列表中查看,如果是定时采集的任务,则支持调度的暂停和恢复操作。
元数据采集 - 图5

采集实例监控

采集实例监控页面支持查看已经生成的实例的状态,点击查看结果按钮可查看表的采集结果,在表的采集结果里面展示变更表未变更表
元数据采集 - 图6

附录:元数据采集内容

当前元数据采集内容如下表所示:
元数据采集 - 图7