4 月 11 日,由极客邦旗下 InfoQ 中国主办的 QCon 全球软件开发大会暨智能软件开发生态展在北京国测国际会议会展中心正式召开。本届大会特别策划了智能软件开发生态展,围绕“智能软件”这一主题,广泛邀请了生态上下游企业来到 QCon 现场展示最新的技术和产品,为大家带来智能软件时代技术先行者们的案例以供参考。云器科技受邀参与,与各位开发者共同探讨AI时代下的Data+AI基础设施建设问题。
在【OpenTalk】交流区,云器科技产品总监王贯扬进行了《Data到Data+AI数据平台的演进》的专题分享,详细阐述了企业如何利用AI技术,如何将AI和数据结合,以及介绍了云器Lakehouse作为数据基础设施的独特优势。
王贯扬认为,随着新一代生成式AI和大模型的到来,数据平台的发展迎来了革命性的变革。AI技术显著提升了数据处理的能力,不仅能够处理结构化数据,还能有效理解和分析半结构化和非结构化数据,如书籍、文档、PPT和视频等。**这种能力的提升导致了数据存储模式的根本变化,从单一的SQL核心结构化数据存储,转变为融合结构化、半结构化和非结构化数据的多元存储模式 。**相应地,顶层的数据分析和处理也得到了扩展,既包括传统的SQL数据分析,也涵盖了以AI技术为代表的新一代数据处理方法。因此,数据平台需要新的架构范式,以更好的适应AI技术发展。
云器基于 “增量计算”技术创新 提出了 一体化数据架构 。云器Lakehouse作为一款全托管数据平台,以“Single-Engine”为技术理念为AI时代的大数据平台架构提出了解题思路。开放式湖仓一体存储,统一结构化与非结构化数据管理,最大化Data+AI的应用生态;基于“增量计算”技术,支持批、流、交互分析及AI拓展的多场景能力,平衡数据时效需求和成本。
介绍了AutoMV(自动物化视图)功能,这是通过AI和自动化的方式优化查询性能的方式之一:系统可以基于AI自动分析数据链路中的作业任务,自动创建MV,一键优化工作量,提升查询性能。