发布于: Nov 28, 2022
AWS Glue 现在提供自定义视觉转换功能,可让客户在他们的团队中定义、重用和共享特定于业务的 ETL 逻辑。AWS Glue 是一项无服务器、可扩展的数据集成服务,它简化了发现、准备、移动和集成来自多个来源的数据的工作。借助这一新功能,数据工程师可以为 AWS Glue 可视化作业编辑器编写可重用的转换。可重用的转换增加了团队之间的一致性,并通过减少重复的工作和代码来帮助保持作业是最新的。
您可以使用 Apache Spark 代码以及用户输入表单定义 AWS Glue 自定义视觉转换。您还可以指定输入表单的验证,帮助防止用户犯错。将定义转换的文件保存到 AWS 账户后,它会自动显示在可视化作业编辑器中的可用转换下拉列表中。您可以通过可视化和基于代码的作业调用自定义视觉转换,在 AWS 账户之间共享转换非常简单。
要了解更多信息,请访问 AWS Glue 文档,阅读博客文章并观看发布视频。
此功能在已推出 AWS Glue 的所有 AWS 区域提供。