有数抽取优先级的作用

如何设置抽取优先级:点击:"项目中心"->"资源管理"->"数据任务" 进入以下界面。

有数抽取优先级的作用 - 图1

设置抽取优先级的意义:

设置优先级是为了保证平台一些重要抽取的数据产出。为重要抽取提供一个绿色通道。

抽取目前分为默认队列和高优先级队列。

举例说明:如果某个时间点,用户抽取的并发数是300个。但是平台默认并发数100个。

这样会导致200个任务堵塞无法进行,如果200个中有重要任务就必须等待。

因此抽取提供了一种优化策略,将默认队列的并发数设置成90个,高优先级队列并发数为10个。

当遇到上面情况,平台90个任务数走默认队列抽取,10个任务数预留给高优先级队列。