11.1.5 spark
更新时间: 2021-12-03 17:34:35
阅读 330
11.1.5 spark
新旧实例版本均不低于spark-2.3.2-bin-ne-0.3.2
选择服务依赖新实例的hdfs,yarn,hive,与旧实例共用zookeeper
为服务增加extra_vars标签,标识为开发环境服务
在配置服务步骤,点击高级选项,填写字段名为cluster_env,字段值为test
按常规流程部署新的spark实例
部署完成后,修改以下配置项,确保以下配置项,与旧实例保持一致
lineage_xml
lineage.hive.catalog (需手动新增配置)
spark-defaults.conf (需要手动创建配置项组)
spark.lineage.hive.catalog
对于旧实例,重启并同步配置
文档反馈
以上内容对您是否有帮助?