Amazon Redshift 宣布支持 Confluent Cloud 和 Apache Kafka

发布于: 2024年11月22日

Amazon Redshift 现在支持从 Amazon EC2 实例上的 Confluent 托管云和自主管理型 Apache Kafka 集群中进行流式摄取，将其功能扩展到 Amazon Kinesis Data Streams (KDS) 和 Amazon Managed Streaming for Apache Kafka (MSK) 之外。

通过此更新，客户可以将更广泛的流来源中的数据直接摄取到他们的 Amazon Redshift 数据仓库中。Amazon Redshift 引入了 mTLS（双向传输层安全性）作为身份验证协议，用于在 Amazon Redshift 和新支持的 Kafka 流来源之间进行安全通信。这可确保从这些新来源摄取的数据达到企业数据工作流程中预期的高安全标准。此外，还引入了新的 SQL 标识符“KAFKA”，以简化 Amazon Redshift 外部架构定义中对这些新支持的 Kafka 来源的识别。

您可以立即开始使用这种扩展的流式摄取功能，构建更全面、更灵活的数据管道，从各种 Kafka 来源摄取数据，包括 AWS 提供的来源 (Amazon MSK)、合作伙伴提供的来源 (Confluent Cloud) 或 Amazon EC2 上的自主管理型来源 (Apache Kafka)。

要了解更多信息并开始将数据从任何 Kafka 来源流式传输到 Amazon Redshift，请参阅 Amazon Redshift 流式传输文档。