Spark on Kudu

适用模块

离线开发
自助分析

具体说明

通过创建Hive外表方式实现通过Spark引擎直接读取Kudu表数据;
使用此功能需在对应节点`$SPARK_HOME/jars`目录下添加`kudu-client-1.x.x.jar``kudu-spark2_2.xx_1.x.x.jar`

使用示例

CREATE TABLE dbname.tablename USING org.apache.kudu.spark.kudu  
OPTIONS(
    "kudu.master"  "bigdata006.deppon.com.cn:7051,bigdata007.deppon.com.cn:7051,bigdata008.deppon.com.cn:7051",
    "kudu.table" "impala::dbname.tablename_kudu"
  );

作者:王松