11.1.5 spark

新旧实例版本均不低于spark-2.3.2-bin-ne-0.3.2

选择服务依赖新实例的hdfs,yarn,hive,与旧实例共用zookeeper

为服务增加extra_vars标签,标识为开发环境服务

Generated

在配置服务步骤,点击高级选项,填写字段名为cluster_env,字段值为test

按常规流程部署新的spark实例

部署完成后,修改以下配置项,确保以下配置项,与旧实例保持一致

lineage_xml

lineage.hive.catalog (需手动新增配置)

spark-defaults.conf (需要手动创建配置项组)

spark.lineage.hive.catalog

对于旧实例,重启并同步配置