数据资产安装步骤

安装前注意事项

不支持和mammut一键安装

如果easy_dqc是easyops1.7.3之前版本部署的,需要执行同步配置

确认已安装 smilodon_job_fetcher

确认已安装 smilodon_fsimage_audit

确认已安装 meta_worker

确认已安装 easy_dqc

确认已安装 easy_transfer

确认已创建离线开发项目mammut_service

确认默认账号admin.mammut@163.com为项目mammut_service负责人

确认通过队列权限管理页面授权admin.mammut@163.com有队列mammut_service权限

提供有效的用户账号,具有mammut_service项目的管理员权限,该账号用于接收数据资产调度任务失败报警

安装时注意事项

修改配置backend分组的task.creator为上述步骤i的用户账号,默认admin.mammut@163.com。如果安装时不能提供用户账号,那么资产任务创建后需要手动修改调度任务的报警接收人配置

检查SmilodonFsimageAudit服务的hdfs_env配置,如果项目名称不是mammut_service则需要改path相关的几个参数为实际的项目名,集群名同理

Generated

安装步骤包含数仓相关数据初始化,涉及到多个服务的接口调用,安装过程中任选其中一台backend负责初始化数仓,接口调用日志存放在该backend的日志目录,故安装时建议只选一个backend,便于安装失败后定位日志。

安装失败时,查看数仓初始化日志,${current_dir}/logs/init_dw_tasks.log,搜索关键字ERROR

安装后注意事项

修改mammut组件依赖管理,新增easy_dasset依赖

重启并同步配置mammut webserver组件