Kafka流表,是实时计算平台基于KafkaTopic定义而来的一种表。在数据地图上,支持显示Kafka流表的基础信息、数据血缘、产出信息、使用说明。

表详情介绍


下图为Kafka流表的表详情的首页:
22 数据地图09.png

其中,基础信息内数据源名表示大数据平台内数据源登记模块中,登记的数据源名称。Topic表示该数据源中具体的一个Topic。序列化方式表示的是Topic的序列化方式。

在字段信息中,可展示该流表定义的字段名称、类型和描述信息。

流表支持血缘关系的展示,其中T是消费Topic的标识,如果是消费流表则不会出现T标志。
37.png

此外,实时流表血缘支持写入HBase、Kudu的血缘。

  • 写入HBase
    Kafka流表 - 图3

  • 写入Kudu
    Kafka流表 - 图4