2024年3月22日 Lakehouse Studio 产品更新发布说明
本次发布（Release 2024.03.22, v0.6）推出了以下新功能、更新（增强及修复）和行为变更。更新将分阶段逐步推送至以下区域：
- 阿里云上海区
- 腾讯云上海区
- 阿里云新加坡区
- 腾讯云北京区
注意：更新将在发布日起一周至两周内完成，具体时间依据您所在的区域而定。
不兼容改动
- 监控告警：规则配置，触发条件中的监控事项，由可支持同时添加三个，改为只能添加一个
新功能特性
- 全局：支持按租户自定义更换Logo
- 数据集成：新增提供多表实时同步功能，数据同步新鲜度可以达到秒级【Beta】
- 数据集成：离线同步ES数据源支持数据过滤和配置动态索引名称
- 数据集成：离线同步ES支持JSON内层字段取值提取
- 数据集成：实时同步PostgreSQL支持UUID类型转换为String类型
- 数据集成：支持脏数据配置能力，同时允许用户查看脏数据的样例和下载。
- 数据集成：多表实时同步任务支持「补数同步」功能，且支持单表和多表批量操作场景。
- 数据集成：新增Lakehouse CDC数据导出到Mongo功能【Beta】
- 数据集成：实时同步，支持批量选择表操作按租户补数
- 任务开发：提供任务组和任务组参数功能【Beta】
- 任务开发：JDBC节点新增支持PG类型
- 任务开发：诸如AK等敏感信息的展示遮掩
- 任务调度：热升级和无感发布收尾
- 任务调度：支持设置任务自动重跑的时间间隔
- 任务运维：在DAG节点上新增补数据功能，选择补数据日期范围后可预览生成实例的信息
- 监控告警：监控告警板块全新升级，页面布局调整，优化用户操作路径。针对指标监控新增提供多种触发规则的计算方式
- 监控告警：新增针对多表实时同步任务的监控，包括指标监控类「多表实时同步任务延迟」，事件监控「多表实时同步任务运行失」、「多表实时同步任务目标表字段变更失败」
- 数据管理：上传数据，支持用户在创建新表的同时添加数据。同时上传数据支持更多类型的本地文件上传至产品内，新增Parquet、Avro、Orc文件类型；支持自定义列分隔符和更多空值表示方式等
- 开放体系：提供对客使用的第一版OpenAPI
优化改进
- 全局：表格一页可显示范围增加100行/页的选项。
- 全局：账户主页新增DataGPT产品入口。
- 全局：在产品交互和使用体验方面的优化改进
- 数据集成：离线同步任务，执行读取权限、字段类型匹配度等前置检查避免任务在最终写入失败
- 数据集成：离线同步任务并发数支持手动输入给定
- 任务开发：版本对比能力加强，扩大支持复制内容的区域范围。
- 作业历史：DAG图支持使用触摸板进行滚动操作、交互设计还原优化
- 任务运维：实例执行日志中耗时增加透出引擎服务端耗时
- 任务运维：任务名称的搜索支持忽略大小写
- 安全中心：工作空间添加用户时屏蔽系统服务账号不让选择
- 监控告警：优化实时同步任务监控告警信息的展示，细化具体的单个的表
- 数据管理：优化数据目录树的展示和拖拽功能。
缺陷修复
- 实时同步：修复任务failover展示信息为空的问题
- 离线同步：修复OSS数据源切换时页面报错的问题
- 任务开发：调度配置里依赖关系缺失部分表的问题
- 数据管理：数据血缘不准确、多个依赖只展示的单个依赖的问题
- 安全中心：修复用户具备workspace_admin角色时无法授权的问题
- 监控告警：修复数据质量任务的超时监控不准确问题
- 数据安全：修复为新用户授予数据权限时，多选对象执行操作报SQL错误的问题
- 计量计费：修复CRU计量展示数据正确性问题
已知局限
- 仅离线集成任务支持脏数据管理功能。
联系我们