功能概述
Hive 存储连接用于访问和管理已有的 Hive 元数据服务。通过配置此连接,您可以:
- 无缝对接现有的数据仓库基础设施
- 复用已构建的表结构和元数据信息
- 统一管理数据目录,实现跨平台数据资产整合
这种配置方式特别适合企业在数据平台升级或整合过程中,实现平滑过渡和系统共存。您无需迁移现有数据,即可充分利用两个系统的优势。
使用限制
- 使用前请注意需要保证,lakehouse和hive集群网络打通
- 目前,云器 Lakehouse 的外部catalog功能支持以下外部数据源:
- Hive on OSS(阿里云对象存储服务)
- Hive on COS(腾讯云对象存储服务)
- Hive on S3(AWA对象存储服务)
- Hive on GCS(Google云对象存储服务)
- 同时支持写入和读取。写格式支持parquet、orc、text文件格式
创建外部 Catalog
创建Hive Catalog 的步骤
- 创建存储连接:首先需要创建一个存储连接,用于访问对象存储服务。
- 创建 Catalog Connection:使用存储连接信息和 Hive Metastore 地址创建 Catalog Connection。
- 创建外部 Catalog:使用 Catalog Connection 创建外部 Catalog,以便在数据湖中访问外部数据。
创建存储连接
创建存储链接可以参考文档,创建STORAGE CONNECTION
创建 Catalog Connection
联系我们