将已经处理好的数据执行落库操作,用户可以选择内部输出节点或外部输出节点至数据库。内部输出将数据抽取至內部数仓,外部输出将数据输出至外部数据库表。

并.png

  • 在内部输出节点配置,可以设置输出表名和数据更新方式。

内部输出.png

  • 在外部输出节点配置,可以设置输出连接、数据库、输出表和数据更新方式。输出表和数据库字段必须完全匹配。目前支持Doris、GreenPlum、ClickHouse三种数据源输出,用户需要先行建立数据连接连接数据库。

外部输出.png

  • 数据更新:

    • 全量覆盖:每次抽取,对数据库的全部数据进行抽取,并覆盖数据库已有的数据。
    • 全量追加:每次抽取,对数据库的全部数据进行抽取,并追加在数据库中。
    • 增量更新:每次抽取,根据增量字段判断数据库中的数据是否为新增数据,对数据库的新增数据进行抽取,并追加在数据库中。
    • 增量滚动更新:每次抽取,根据日期及滚动周期将数据库中的新增以及部分历史数据抽取到数据库中,其中历史数据将会覆盖原数据。
  • 视图配置:在字段视图处,支持对字段添加注释。在数据视图处,可以查看输出表的列和数据。在统计视图,可以查看字段的统计信息,支持查看各个成员的行数与百分比。

  • 用户可以在项目中心的数据任务管理中进行输出管理,具体查看 数据任务管理