Spark on Kudu
更新时间: 2024-03-11 02:52:49
阅读 1915
Spark on Kudu
适用模块
离线开发
自助分析
具体说明
通过创建Hive外表方式实现通过Spark引擎直接读取Kudu表数据;
使用此功能需在对应节点`$SPARK_HOME/jars`目录下添加`kudu-client-1.x.x.jar`及`kudu-spark2_2.xx_1.x.x.jar`
使用示例
CREATE TABLE dbname.tablename USING org.apache.kudu.spark.kudu
OPTIONS(
"kudu.master" "bigdata006.deppon.com.cn:7051,bigdata007.deppon.com.cn:7051,bigdata008.deppon.com.cn:7051",
"kudu.table" "impala::dbname.tablename_kudu"
);
作者:王松
文档反馈
以上内容对您是否有帮助?