Amazon SageMaker 向 OpenLineage 社区贡献了自定义传输功能,并提供了额外的沿袭功能

发布于: 2025年6月26日

AWS 宣布,Amazon SageMaker 向 OpenLineage 社区贡献了自定义传输“AmazonDataZoneTransport”功能,并增强了自动沿袭功能。这些沿袭增强功能包括改进来自 AWS Glue、Amazon Redshift 等来源的自动化,以及通过工具自动采集沿袭,使数据科学家和工程师能够更高效地使用其数据和模型。

为 OpenLineage 社区贡献的新“自定义传输”功能使开发人员能够下载传输以及 OpenLineage 插件,以增强和自动化从支持 OpenLineage 的系统捕获的沿袭事件。这样,客户可以自动捕获沿袭并将这些沿袭事件发送到 SageMaker 融通式合作开发工作室域,从而增强其数据工作流程中的数据治理和可追溯性。Amazon SageMaker 还推出了来自各种来源的增强型自动沿袭功能。这些改进包括更好地支持来自 AWS Glue、Amazon Redshift 的沿袭事件,以及通过 vETL 流程和 Notebook 等工具自动捕获沿袭。此外,SageMaker 还改进了对 SQL 沿袭的支持,特别是 Amazon Redshift,新功能包括对存储过程和实体化视图的支持。这些增强功能可以自动捕获复杂数据操作的沿袭,从而提供更全面的数据转换和依赖关系视图。

此功能将在所有提供 Amazon SageMaker 的 AWS 区域推出。

要详细了解自定义传输贡献和增强的沿袭功能,请访问 Amazon SageMaker 页面。有关如何使用这些新功能开始使用沿袭的详细信息,请参阅用户文档