流程简介

在大数据开发及管理平台中,对业务数据进行集成、加工、建模和数据开放等过程如下所述:

1、首先需要加入某个项目中,具备使用相关产品功能和任务运行时的基本权限(部分产品功能受角色权限控制,比如模型设计中心,需要为项目中”数仓开发”角色才可访问产品页面);

2、然后进入确定需求和数据准备阶段,在这一过程中,需要确定指标口径,消除指标二义性,将业务库中的数据集成到大数据开发及管理平台中;

3、接着是数仓设计和数据开发阶段,需要通过模型设计中心构建规范化数仓,通过离线开发构建ETL过程,且通过数据质量中心、数据测试中心以及基线任务运维产品把控数据质量和任务产出的时效性;

4、最后是数据交付和使用阶段,可以通过数据服务快速将加工好的数据表生成API供外部业务系统调用,或直接对接BI产品(比如网易有数)制作报表、大屏等进行数据使用和分析。

基于连锁便利店的销售业务数据,在大数据开发及管理平台中的业务流程图如下所示:

流程简介 - 图12021-08-27-13-54-13.png# 流程简介

在大数据开发及管理平台中,对业务数据进行集成、加工、建模和数据开放等过程如下所述:

1、首先需要加入某个项目中,具备使用相关产品功能和任务运行时的基本权限(部分产品功能受角色权限控制,比如模型设计中心,需要为项目中”数仓开发”角色才可访问产品页面);

2、然后进入确定需求和数据准备阶段,在这一过程中,需要确定指标口径,消除指标二义性,将业务库中的数据集成到大数据开发及管理平台中;

3、接着是数仓设计和数据开发阶段,需要通过模型设计中心构建规范化数仓,通过离线开发构建ETL过程,且通过数据质量中心、数据测试中心以及基线任务运维产品把控数据质量和任务产出的时效性;

4、最后是数据交付和使用阶段,可以通过数据服务快速将加工好的数据表生成API供外部业务系统调用,或直接对接BI产品(比如网易有数)制作报表、大屏等进行数据使用和分析。

基于连锁便利店的销售业务数据,在大数据开发及管理平台中的业务流程图如下所示:

流程简介 - 图3