版本:v3.7.3

功能优化

1.配合平台S3的接口改造以及部分接口优化。

  • 功能介绍:

    • 有关HDFS的接口改造,配合平台S3的接口改造以及部分老接口的优化。

版本:v3.7.2

新增功能

1.支持标签元数据批量更新的openapi

  • 功能介绍:

    • 提供Openapi接口,支持对部分标签系统字段和自定义字段进行批量更新。

2.对接安全中心访问控制权限

  • 功能介绍:

    • 在安全中心项目组级别,支持对标签画像访问权限进行控制,若未赋权标签画像的访问权限,则点击导航栏的标签画像,无法访问产品。
  • 功能使用注意事项:

    • 在赋权标签画像新建、编辑标签等权限时,需要先赋权标签画像的产品访问权限。

3.支持推送标签和表字段血缘至地图侧展示

  • 功能介绍:

    • 支持将表和标签的关系推送至数据地图侧,在数据地图的血缘链路上可查看表和标签的关系。
  • 功能使用注意事项:

    • 标签画像侧,仅行为标签和基础标签和表字段有直接关联,推送的血缘信息仅包含行为标签和基础标签的内容。

版本:v3.7.1

新增功能

1.开启治理流程后,未经过注册的标签支持直接发布

  • 功能介绍:

    • 开启治理流程后,未经过注册的标签可直接发布。
  • 功能使用注意事项:

    • 若开启治理流程后,未经过注册的标签直接发布,此发布态标签为未治理;若经过注册后,经过了申请确权、申请变更安全等级、申请治理等过程后再发布的标签为已治理状态,可在详情页查看是否为已治理的标签。

2.工作组创建时支持设置复合标签、融合表和群组表的存储格式

  • 功能介绍:

    • 在创建工作组时,支持选择该工作组下标签表、融合表和群组表的存储格式,根据选择的不同的查询引擎,支持parguet、text等不同的存储格式,满足不同业务场景下对数据表的存储格式要求。
  • 功能使用注意事项:

    • 若查询引擎选择impala,仅支持parquet和textfile的存储格式。

3.码表同步时支持选择hive或者impala引擎队列

  • 功能介绍:

    • 码表同步时,之前默认为impala队列执行,无法满足集群下没有Impala队列场景下码表同步的需求,故新增hive/impala的引擎选择。

4.群组元数据支持推送kafka通道类型

  • 功能介绍:

    • 群组元数据支持推送到kafka的通道类型,推送内容包含群组ID、群组名称、查询标识ID、计算的业务日期、覆盖数、人群包所在地址、操作人、操作时间、查询时标识名称、表达式和所属对象ID。
  • 功能使用注意事项:

    • 目前推送的通道类型仅支持kafka,kafka数据源来源于在控制台"数据源管理"处登记的kafka数据源。

5.群组详情页增加引用详情,包括被别的群组引用和被标签画像API引用。

  • 功能介绍:

    • 群组详情页增加引用详情,支持查看当前群组被其他群组引用或者被标签画像API引用。
  • 功能使用注意事项:

    • 由于标签以项目组-集群下的工作组为基本管理单位,数据服务以项目为基本管理单位,故引用详情可通过标签画像API所属项目、所属集合唯一定义被哪个API引用。

6.ops上支持配置办公网/非办公网场景下查看不同的产品功能模块

  • 功能介绍:

    • 在Ops侧支持合规性配置,可在办公网/非办公网下查看产品的不同功能模块,比如办公网下不可见群组管理、画像分析模块(涉及敏感数据)。
  • 功能使用注意事项:

    • 在Ops侧,参数datagovernanceRefresh 配置值为 open ,配置生效后,群组管理、画像分析模块,访问会强制刷新页面,进而可以在nginx拦截。

功能优化

1.完善主标识下线后,无法更换其他字段作为主标识的逻辑

  • 功能介绍:

    • 主标识下线后,通过编辑对象操作,无法更换其他字段作为主标识,也无法重新选择原本的字段作为主标识,导致无法更换主标识。
    • 修复逻辑为:下线主标识后,若对该主标识重新申请治理,更换其他字段作为主标识,流程支持;若下线主标识后,对对象进行编辑,更改其他字段作为主标识,由于同一个对象下不允许存在两个主标识,故之前已经下线的主标识将退化为"标识"。
  • 功能使用注意事项:

    • 若下线主标识,通过编辑对象更换了其他字段作为主标识,则之前已经下线的主标识将退化为"标识"。

2.修复非数据治理管理员对已确权的草稿绿点标签(表示为草稿态但存在已发布版本)进行编辑或者删除时的报错提示

  • 功能介绍:

    • 非数据治理管理员对已确权的草稿绿点标签进行编辑或删除时会提示只有数据治理管理员可进行修改,但此时主管部分并不可以更改成员,修改该问题,允许非数据治理管理员进行编辑或删除。

3.完善通过导入的方式创建标签时,增加公开属性的判断

  • 功能介绍:

    • 创建标签时,对于公开属性字段,行为标签可选择公开或私有,基础标签若为标识或主标识类型,只可选择公开。
  • 功能使用注意事项:

    • 若基础标签为标识或主标识,选择了私有,则会增加错误判断。

4.修复对原有工作组编辑存储数据库时的报错

  • 功能介绍:

    • 已创建成功的工作组,编辑存储数据库时,报错改工作组下已有对象,但本质该工作组下并未创建任何对象/标签。

5.标签引用详情功能完善,标签画像API增加所属项目和所属集合信息。

  • 功能介绍:

    • 由于标签以项目组-集群下的工作组为基本管理单位,数据服务以项目为基本管理单位,故引用详情可通过标签画像API所属项目、所属集合唯一定义当前标签被哪个API引用。

6.公开属性默认为公开

  • 功能介绍:

    • 创建标签时,公开属性由原本默认为私有,优化为默认为公开。

7.交互视觉优化

  • 功能介绍:

    • 编辑工作组时,若切换查询引擎,会误判没有选择的交互优化。

8.交互优化,删除增加二次弹窗确认

  • 功能介绍:

    • 审批策略删除、群组删除均增加二次弹框确认。

9.导入标签,增加空模板判断规则

  • 功能介绍:

    • 之前对于空模板,会直接提示导入成功,增加使用误解,修改为会直接提示当前模板里无内容,请调整后重新上传。

10.标签列表更多中增加引用详情

  • 功能介绍:

    • 标签列表中,更多下增加引用详情,不需要到标签统计中单独再找某个标签的引用详情。

版本:v3.7.0

新增功能

1.借助数据服务的能力,支持标签和群组生成标签画像API

  • 功能介绍:

    • 助数据服务生成API的能力,可以将群组或者标签数据生成API。可以在"数据服务"产品中API列表模块,点击新建标签画像API功能创建群组或者标签API。
  • 功能使用注意事项:

    • 群组API会获取最新一次实例生成的数据生成API,若最新一次群组实例运行失败,无法在群组详情或列表中直接点击"生成群组API";

    • 由于群组重新编辑重新计算后,有可能更改表schema信息,故群组API只会获取最新一次实例运行成功的群组表数据,若已经创建了API,又更改了群组表结构,有可能会导致API失败;

    • 由于标签画像和数据服务基本管理单位不一,标签的工作组映射为数据服务项目,一个项目下会对应多个工作组,数据服务API集市保持为项目组为管理单位;

    • 新建权限由数据服务产品侧控制,可以在安全中心-角色管理中,项目级别赋予是否有新建API的权限;

    • 群组hdfs文件生命周期,对于之前已经创建成功的数据,默认保留永久。

    • 只有最新一次实例运行成功的群组可生成群组API,只有已发布的标签可生成标签API;生成API后,无法下线标签和删除群组,但在编辑标签或群组时会给出引用提示。

    • 标签画像API功能仅支持引擎为hive的工作组,暂不支持查询引擎是ES数据源的工作组;

    • 标签API功能暂不受使用权限和行级权限管控,在数据服务API侧获取到的是全量数据。

    • 对于标签API,在创建时需要配置入参,对于群组API,只需要设置返回参数即可。

2.群组数据支持生成Hive内部表,支持在每次实例运行历史中查看群组表信息;

  • 功能介绍:

    • 群组每次计算会对应生成实例表,实例表生命周期按照设置的配置进行管理

3.群组支持设置HDFS文件生命周期和表生命周期;

  • 功能介绍:

    • 创建群组时,支持设置群组hdfs文件和群组表的生命周期。

4.支持工作组筛选。

  • 功能介绍:

    • 一个项目下可能会对应多个工作组,当工作组数量较多时,支持筛选

5.工单提交后,支持文字提示快速进入流程协作与通知中心查看工单详情,包括标签管理和标签API申请操作产生的工单。

  • 功能介绍:

    • 在标签管理列表,对标签申请发布、治理、变更安全等级等操作时,若生成工单,文字提示会增加快速进入工单详情页的流协的链接;在标签市场,若申请使用权限,文字提示,也会增加申请工单详情页的快速查看链接。

6.标签导出,支持批量和全量导出

  • 功能介绍:

    • 在标签管理中,若批量选择标签,支持部分导出,或者全量导出标签。

功能优化

1.标签引用详情增加标签画像API

  • 功能介绍:

    • 若在创建标签画像Api时,有引用标签,在标签详情中将增加被哪些API引用的详情

2.交互视觉优化,标签管理查看标签,支持新开页面,防止筛选标签后查看详情将筛选内容清空

  • 功能介绍:

    • 在标签管理列表,筛选条件后,点击标签名称,默认在当前页打开标签详情,重新返回列表会将筛选项清空,优化为点击标签名称新开页面查看标签详情,保留筛选项。

3.申请治理的工单,支持在编辑页面直接点击处理完成

  • 功能介绍:

    • 之前对于申请治理的工单,点击"去处理"在编辑页面只能点击保存,工单更改为"完成"还需要到流协中点击"同意",导致流程割裂,故支持申请治理的工单,在"去处理"的编辑页面就点击处理完成,对应工单状态为已完成

版本:v3.6.2

新增功能

1.标签画像前端埋点支持对接神策系统


版本:v3.6.1

新增功能

1.标签管理支持批量操作,包括批量申请注册、申请治理、发布、下线、删除等操作

  • 功能介绍:

    • 在标签管理中,批量选择标签,支持对标签批量申请注册、申请治理、发布、下线、删除等操作

功能优化

1.标识、主标识和行为标签,公开属性需设置为公开

  • 功能介绍:

    • 在新建标签时,若标签子类型为标识或者主标识,由于标识和主标识在圈群分析中一定是需要选择使用的,故对于标识或者主标识不需要设置为权限申请属性,默认为公开

2.管理员默认对所有标签有使用权限,无需额外申请标签使用权限;创建人对自己创建的标签也默认有使用权限,无需额外申请

  • 功能介绍:

    • 管理员(项目级:项目管理员、负责人、dmp角色;项目组级:项目组管理员、负责人、数据治理专员、数据治理管理员)对所有标签有使用权限,标签创建者对自己创建的标签默认也有使用权限,不需要到标签市场申请使用权限。

3.对接安全中心功能权限优化

  • 功能介绍:

    • 包括组合操作下的校验问题、复制群组后,对标签无使用权限的验证、人工打标功能优化

4.流协工单转交后的审批人展示优化

  • 功能介绍:

    • 流协工单转交后,在标签详情页查看审批人,应为转交后新的审批人

版本:v3.6.0

新增功能

1.指标标签行级权限

  • 功能介绍:

    • 标签管理支持创建行级权限策略,控制标签的行级权限,在创建行级权限时,可赋权授予项目组下成员或角色,则在标签圈群、群组分析等查询页面,赋权用户只能看到行级权限值内的数据,比如渠道这个标签,标签值包括A和B,将渠道=A授权给用户小易,小易在圈群查询时只能传递渠道=A才可获取数据,无法获取渠道等于其他方式的内容,以满足对不同用户可见标签范围不一致的场景。
  • 功能使用注意事项:

    • 行级权限方案开启后即时生效,在圈群、群组交并差、群组画像等查询标签的页面,按照规则对授权用户控制行级数据访问权限;
    • 标签创建/编辑不受标签行级权限管控;
    • 行级权限不对管理员生效,包括项目组负责人、项目组管理员、项目负责人和项目管理员。
    • 在群组列表中下载时(群组数据存储为HDFS格式),群组包中的数据以群组创建人满足的行级权限获取的数据为主,暂不支持根据当前下载用户动态获取数据。
    • 新建行级权限策略,仅支持选择对象下已发布的基础、复合、人工标签数据;
    • 行级权限若要删除,需先关闭行级权限,才可将策略删除

2.指标标签行级权限

  • 功能介绍:

    • 安全中心角色管理的功能权限,在标签管理中增加行级权限的管控,支持单独赋权新建、编辑和删除行级权限。

版本:v3.5.0

新增功能

1.功能权限对接安全中心

  • 功能介绍:

    • 标签画像功能权限对接安全中心进行管控,在项目组级别可按照工作组选择标签管理等模块的操作权限。
  • 功能使用注意事项:

    • 项目组管理员、项目组负责人、项目管理员、项目负责人、dmp角色、数据治理专员和数据治理管理员默认对标签画像有全部权限,未赋权用户默认不可见标签管理和配置管理页面,仅可见标签市场、群组管理和画像分析。

2.支持设置免审批用户

  • 功能介绍:

    • 在工作组下,开启了流程审批后,标签管理中支持申请注册、申请发布、申请变更安全等级等流程,支持在配置管理中设置免审批人员,且若申请人和审批人属于同一个角色,默认也可免审批。

3.标签模板字段支持统一排序

  • 功能介绍:

    • 标签模板设置,支持对于系统字段和自定义字段进行统一的排序设置

4.标签类目层级扩展

  • 功能介绍:

    • 工作组下的标签类目管理支持最多十级目录,支持更灵活的标签目录管理功能

5.标签模板字段支持设置提醒功能

  • 功能介绍:

    • 标签模板配置中,系统字段支持增加提醒功能,用户可自定义包括系统字段在内的所有模板中字段的提醒功能。

6.单体画像支持查询基础标签和复合标签

  • 功能介绍:

    • 由于复合标签有可能涉及到多张表join操作,查询性能有一定的影响,在单体详情页面,会先展示查询成功的标签,支持再次刷新重新获取数据。

版本:v3.4.0

新增功能

1.标签模板改为项目组-集群级别

  • 功能介绍:

    • 在配置管理中,可以在项目组-集群级别创建标签模板;同时编辑工作组时,支持选择使用哪个标签模板。

2.支持自定义资源目录内容,最多支持十级

  • 功能介绍:

    • 在配置管理中,可以配置自定义的资源目录,字段内容保持和标准一致。

3.新增标签市场模块

  • 功能介绍:

    • 新增标签市场模块,支持对标签设置公开属性,若为公开的标签,则进入标签市场,支持申请标签。可在配置管理中对标签市场中的审批人进行配置,支持指定某个工作组下项目组的成员/角色进行审批。同时可在标签市场中查看我的申请。

4.功能模块调整

  • 功能介绍:

    • 功能模块调整,标签圈选移入到群组管理中

5.安全等级变更,和安全中心保持文案一致,从1、2、3、4统一为s1、s2、s3、s4