Amazon OpenSearch Ingestion 现在支持 AWS Lambda 进行自定义数据转换
发布于:
2024年11月22日
Amazon OpenSearch Ingestion 现在允许您利用 AWS Lambda 进行事件处理和路由,从而实现流式数据的复杂转换和扩充。客户现在可以在其 OpenSearch Ingestion 管道中定义自定义 Lambda 函数,将其用于在外部数据库中生成向量嵌入和查找等使用案例,以支持高级搜索使用案例。
借助 OpenSearch Ingestion,您可以在转换数据时选择仅使用 Lambda 函数,或者将 Lambda 函数与原生 Data Prepper 处理器关联起来。您还可以根据事件数量和大小将事件批处理成单个有效载荷,然后调用 Lambda 以优化 Lambda 调用次数,从而降低成本和提高吞吐量。此外,您可以将此功能与 Amazon OpenSearch Ingestion 中的内置条件表达式结合使用,支持诸如发送电子邮件和通知以实时提醒之类的使用案例。
此功能在目前提供 Amazon OpenSearch Ingestion 的所有 15 个 AWS 商业区域推出:美国东部(俄亥俄州)、美国东部(弗吉尼亚州北部)、美国西部(俄勒冈州)、美国西部(北加利福尼亚)、欧洲地区(爱尔兰)、欧洲地区(伦敦)、欧洲地区(法兰克福)、亚太地区(东京)、亚太地区(悉尼)、亚太地区(新加坡)、亚太地区(孟买)、亚太地区(首尔)、加拿大(中部)、南美洲(圣保罗)和欧洲地区(斯德哥尔摩)。
要了解更多信息,请参阅 Amazon OpenSearch Ingestion 网页和 Amazon OpenSearch Service 开发人员指南。