Amazon Redshift 现在支持对数据湖表的实体化视图 (MV) 进行增量刷新

发布于: 2024年10月30日

Amazon Redshift 现在支持增量刷新数据湖表上的实体化视图 (MV)。此功能可帮助客户以具有成本效益和高效的方式提高其数据湖查询的查询性能。通过为 MV 启用增量刷新,客户可以更高效、更经济的方式维护最新数据。

客户利用数据湖表来实现具有成本效益的存储以及与其他工具的互操作性。现在,通过开放表格式 (OTF),例如 Apache Iceberg,数据正在不断添加和更新。以前,不断变化的数据需要对实例化视图进行全面重新计算,以维护新数据。Amazon Redshift 现在能够通过识别基础数据湖表中的更改,且仅从 Amazon S3 读取基础数据的已更改部分,而不是扫描整个数据集,从而以增量方式刷新数据湖表上的 MV,进而为符合条件的实体化视图节省成本和时间。

对数据湖表上实体化视图的增量刷新的支持现已在所有商业区域推出。要开始使用并了解详情,请访问文档