2024年1月5日 Lakehouse Studio 产品更新发布说明

本次更新（Release 2024.01.05, v0.5）旨在为用户提供更全面、便捷的数据管理和分析体验。我们推出了一系列新功能、优化改进以及缺陷修复。更新将分阶段逐步推送至以下区域：

• 阿里云上海区
• 腾讯云上海区
• 阿里云新加坡区
• 腾讯云北京区

注意：更新将在发布日起一周至两周内完成，具体时间依据您所在的区域而定。

不兼容的变更

• 本次更新中没有引入不兼容的变更。

新功能与特性

数据集成增强

• 全增量一体实时同步：新增功能支持将MySQL和PostgreSQL数据库的整库实时镜像同步到Lakehouse，以及多表合并同步功能。例如，您可以实时同步销售数据库中的订单表和客户表，确保数据分析的时效性和准确性。
  

  预览

任务开发改进

• 全量下载：现在您可以将查询结果以CSV格式下载到本地，便于进行二次分析和数据探索。例如，您可以下载用户行为数据，使用Excel或其他分析工具进一步处理。

  

  预览

• 数据树增强：数据树现在支持名称关键字搜索，并提供数据预览、上传数据、添加表名称/字段至编辑器等功能。

  

  预览

• 参数外置：新功能让您能够快速查看任务中使用的参数，并进行赋值运行任务。例如，在数据同步任务中，您可以设置并调整并发数参数以优化任务执行效率。

  

  预览

数据资产管理

• 数据资产地图：整合了原先的数据目录和数据库功能，提供统一的数据资产信息查看入口。提供统一数据检索查询能力，提供数据搜索、可视化创建shema，可视化创建数据对象等功能。
  

  预览

运维中心优化

• DAG图功能增强：周期任务详情和实例详情中的DAG图现在支持分组和多层展开，帮助您更清晰地理解任务执行流程。

  

  预览

• 批量补数据：新增功能提升运维效率，简化数据补全流程。

  

  预览

监控告警拓展

• 监控告警类型新增：新增了多种监控事件和指标监控，帮助您更好地跟踪任务执行情况和数据质量。
  

  预览

数据质量管理

• 指标取值变动校验：新功能支持对比数据波动，确保数据质量符合预期。

  

  预览

• Lakehouse View和MV质量监控：新增支持对Lakehouse视图和物化视图配置质量监控规则。

  

  预览

安全性增强

• 多因子身份认证（MFA）：新增支持MFA，增强账号安全性。

优化改进

• 数据集成：改进了任务配置中参数的定义和使用方式，使得配置更加直观易懂。

• 任务开发：优化了SQL单表查询的自动补全，增加了LIMIT限制，降低了资源消耗。

缺陷修复

• 数据集成：修复postgresql-lh集成任务填写splitpk字段时运行报错的问题。
• 数据集成：修复mysql的timestamp类型到Lakehouse string、timestamp_ltz的取值存在时区偏差的问题。
• 数据上传：修复因分割符处理问题导致数据导入失败的问题。
• 数据质量：修复周期任务触发校验规则时，时间参数取值替换错误的问题。
• 运维中心：修复列表中展示的集群信息和任务配置的集群信息不一致的问题。