本文为您介绍实时流计算 EasyStream 2024年产品更新动态,帮助您及时了解 EasyStream 的新增功能及功能变更等,快速掌握产品情况。

最新更新

版本:v4.1.0(LTS 7.0-Update 1.6)

新增功能

1.实时流表支持Iceberg。

  • 功能介绍:
    • 新增支持Iceberg流表登记、展示和使用。

2.实时任务支持脏数据管理。

  • 功能介绍:
    • 为了应对上游(源端)SCHEMA变更,导致下游任务运行异常情况,实时任务目前已支持脏数据管理:
    1. 任务出现脏数据时可以配置不挂掉,能够持续运行;
    2. 通过配置合理的管理策略,脏数据能打印到日志,并产生报警;
    3. 能够在运维页面查看脏数据内容;
    4. 能够自定义配置脏数据报警规则(统计周期、脏数据量、报警间隔)。
功能优化

1.优化Submitter运行时信息更新逻辑,减少binlog数据量。

版本:v4.0.0(LTS 7.0-Update 1.5)

新增功能

1.支持日志History Server。

  • 功能介绍:
    • 对日志模块进行了重大重构,新增支持History Server,能够在内嵌运维页面查看当前/历史JM、TM日志,当前/历史异常日志以及任务启动/停止日志,方便用户便捷查看当前状态及快速的定位诊断问题。
功能优化

1.Notebook开发优化。

  • 功能介绍:
    • Notebook优化核心解决的问题:
      • 补足Source源端对接能力,新增可视化数据探查功能
      • 快速引用流表/物理表
      • 可视化配置参数,降低开发门槛
      • 增强调试能力

2.实时开发任务能单独配置参数

3.实时开发-main.args 支持引用【公共资源-参数组】配置的参数

4.支持ndi插件灰度上线