亚马逊AWS官方博客

Tag: Amazon Managed Workflows for Apache Airflow (Amazon MWAA)

推出 Amazon Managed Workflows for Apache Airflow (MWAA)

随着数据处理流水线容量和复杂性的增大,您可以将整个过程分解为一系列较小的任务来将其简化,然后将这些任务作为工作流的一部分来协调它们的执行。为此,许多开发人员和数据工程师使用 Apache Airflow,它是一个由社区创建的用于以编程方式编写、安排和监控工作流的平台。借助 Airflow,您可以将工作流作为脚本进行管理,通过用户界面 (UI) 对其进行监控,并使用一组强大的插件扩展其功能。但是,手动安装、维护和扩展 Airflow,以及处理用户的安全性、身份验证和授权需要花费大量您用于集中精力解决实际业务问题的时间。

出于这些原因,我很高兴地宣布将推出Amazon Managed Workflows for Apache Airflow (MWAA)。它是一项完全托管的服务,使您可以轻松地在 AWS 上运行开源版 Apache Airflow 并构建工作流来执行您的提取、转换、加载 (ETL) 作业和数据流水线。