↑↓ 选择↵ 打开⌫ 切换范围完整搜索

PG.CENTER 连接 PostgreSQL 文档、百科与生态知识。由 Pigsty 维护。

美联航用目录联邦连接 Redshift 与 Unity Catalog RSS

美联航将湖仓数据保存在 S3,用 Unity Catalog 管理,同时使用 Redshift 分析。其工程案例通过 Glue 目录联邦和 Iceberg REST 接口连接两者,再创建资源链接供外部模式访问。Lake Formation 在查询时提供受限的临时凭据,省去另一条数据同步管线。配置时须分别授权资源链接与目标表;Delta 表还要启用 UniForm,才能提供兼容元数据,不能仅连通目录就假定所有表均可查询。

发布于 2026-09-22T01:07:34.479881Z · Ankit Aggarwal、Raja Kalluri 等 · AWS Big Data Blog
湖仓 联邦查询

美联航将湖仓数据保存在 S3,用 Unity Catalog 管理,同时使用 Redshift 分析。其工程案例通过 Glue 目录联邦和 Iceberg REST 接口连接两者,再创建资源链接供外部模式访问。Lake Formation 在查询时提供受限的临时凭据,省去另一条数据同步管线。配置时须分别授权资源链接与目标表;Delta 表还要启用 UniForm,才能提供兼容元数据,不能仅连通目录就假定所有表均可查询。

美联航将湖仓数据保存在 S3,用 Unity Catalog 管理,同时使用 Redshift 分析。其工程案例通过 Glue 目录联邦和 Iceberg REST 接口连接两者,再创建资源链接供外部模式访问。Lake Formation 在查询时提供受限的临时凭据,省去另一条数据同步管线。配置时须分别授权资源链接与目标表;Delta 表还要启用 UniForm,才能提供兼容元数据,不能仅连通目录就假定所有表均可查询。

原始来源 ↗

来源记录
  • pgweb.info_item · 35c0ca3ccf19698f · 2026-10-03T04:08:55.967155Z