INFO-api2hive数据传输

适用模块
抽取api数据写入hive多个字段,不再固定指定去向端一个字段
具体说明
1、登记api 数据源;
2、配置传输任务,并指定分页
使用示例
1、数据源信息
INFO-api2hive数据传输 - 图1
2、传输任务配置
INFO-api2hive数据传输 - 图2
INFO-api2hive数据传输 - 图3
特别说明:分页信息需要填写变量例如
{ "page_size":"$(pageSize)","page_num":"$(pageNumber)","use_total_num":1}。
否则会循环读取数据
INFO-api2hive数据传输 - 图4
总量字段字段根据接口返回情况填写:
INFO-api2hive数据传输 - 图5

作者:林帅