有数抽取优先级的作用
更新时间: 2024-07-30 11:33:44
阅读 170
有数抽取优先级的作用
如何设置抽取优先级:点击:"项目中心"->"资源管理"->"数据任务" 进入以下界面。
设置抽取优先级的意义:
设置优先级是为了保证平台一些重要抽取的数据产出。为重要抽取提供一个绿色通道。
抽取目前分为默认队列和高优先级队列。
举例说明:如果某个时间点,用户抽取的并发数是300个。但是平台默认并发数100个。
这样会导致200个任务堵塞无法进行,如果200个中有重要任务就必须等待。
因此抽取提供了一种优化策略,将默认队列的并发数设置成90个,高优先级队列并发数为10个。
当遇到上面情况,平台90个任务数走默认队列抽取,10个任务数预留给高优先级队列。
文档反馈
以上内容对您是否有帮助?