抽取管理

在项目中心的抽取管理模块,可以看到整个项目目前已有的所有抽取任务

  • 可按照上方的tab选择全部连接,抽取完成,抽取中,抽取失败,禁用等不同状态的任务,如图所示。

抽取管理 - 图1

选择全部连接时弹窗显示数据连接,可选择某一连接,查看相关抽取记录

抽取管理 - 图2

  • 可对抽取记录进行发送日报、立即取数、禁用、启用、设置禁用规则,如下图所示

抽取管理 - 图3

1、发送日报:可推送抽取记录,选择发送日报,添加发送对象,发送时间(发送内容的范围为:前一天0点~当天0点)0至24内,将时间内的抽取记录发送给设置的接收人

抽取管理 - 图4

2、立即抽取:选择下方抽取记录,点击立即抽取,将对选中的数据连接进行抽取

3、禁用:选择下方抽取记录,可对选中的抽取任务禁用,此条抽取任务【状态】显示【禁用】

4、启用:选择禁用的抽取任务,点击启用,可继续进行抽取

5、设置禁用规则:开启后,系统会定期将满足条件的抽取任务禁用

规则:连续抽取失败n次、连续七天无报告或大屏依赖的抽取任务、抽取数量连续n次超过x万

满足规则的抽取任务自动被禁用,同时可选择确定后立即执行

抽取管理 - 图5

  • 抽取记录

抽取记录显示表名、数据连接、类型、状态、调度信息、占用空间、成功率、创建人、优先级、操作

抽取管理 - 图6

1、点击【表名】后可查看表内详细信息

抽取管理 - 图7

2、数据连接显示该抽取任务的数据连接类型及名称

3、类型:显示【全量】或【增量】抽取

4、状态:显示【加载中】【成功】【失败】【禁用】四种状态,可查看抽取任务的状态

5、调度任务:【最近抽取时间】【下次抽取时间】【任务频率】(排序(按抽取时间排序)、筛选(按抽取频率抽取))

6、占用空间:占用MPP资源的多少

7、成功率:抽取任务中,抽取成功占比

8、创建人:显示此次抽取任务的创建人

9、优先级:【1-最高】【2-次高】【3-中等】【4-次低】【5-最低】【无】

在进行多个抽取任务时,将抽取任务划分优先级进行抽取。同时在【优先级】旁可进行筛选,查看不同优先级的记录

10、操作:

【抽取设置】

抽取方式:全量覆盖抽取、全量追加抽取、增量抽取、增量抽取(滚动覆盖) 抽取方式详见:数据抽取

高级设置:

①失败自动重跑:重跑次数n次、重跑间隔n分钟

②仅当检测以下表数据更新后才抽取:以下数据源的数据发生变更时,表信息会自动同步到有数服务器,有数将会自动完成抽取任务,不需要用户手动触发。勾选后,需要用户主动调用有数接口告知该表数据已经更新,否则不会触发抽取,并且定时任务设置将不再生效

③添加定时任务:可选择任务的频率、日期、时间、开始/终止日期进行抽取,同时可勾选暂停定时任务

抽取管理 - 图8

【更多】

历史记录、查看血缘、变更创建人、查看依赖项、删除、告警设置、任务ID