FAQ-离线传输,SR2FTP任务报错类不存在

问题描述/异常栈
SR作为源端时,传输任务报错类不存在:
User class threw exception: java.lang.NoClassDefFoundError:org/apache/spark/sql/connector/catalog/SupportsCatalogOptions
FAQ-离线传输,SR作为源端时,任务报错类不存在 - 图1
发现版本
easy_transfer 3.26.0.3.3
解决方案
改为用spark3 运行传输任务,修改方式如下:
(1)在传输试运行时设置:
FAQ-离线传输,SR作为源端时,任务报错类不存在 - 图2
(2)离线开发内设置:
FAQ-离线传输,SR作为源端时,任务报错类不存在 - 图3
(3)设置调度时设置:
FAQ-离线传输,SR作为源端时,任务报错类不存在 - 图4
问题原因
spark2版本不支持源端为SR的传输任务,需改为spark3版本使用

作者:曹俊