亚马逊AWS官方博客
Category: Analytics
一分钟从零构建数据湖,S3 Tables 究竟有啥魔力?
2024 年,亚马逊云科技发布了 S3 Tables,内置对 Apache Iceberg 的支持,旨在优化大规模表格数据的存储和查询性能。S3 Tables 通过自动化的表维护和与亚马逊云科技的分析服务的无缝集成,帮助企业更快速地构建数据湖,简化权限管理,并提升查询性能和事务处理能力,满足现代数据驱动型业务的需求。本文将探讨 S3 Tables 技术的应用场景及其对业务的收益及最佳实践,提供生产中可参考的价值。
AWS 一周回顾:Amazon EKS、Amazon OpenSearch、Amazon API Gateway 等(2025 年 4 月 7 日)
AWS Summit 季将于本周开始! 免费活动现已陆续启动,我们将汇聚云计算社区成员共同交流、协作与学习。无 […]
使用 FluentBit 抽取日志到 AOS 中不同索引 Index
FluentBit 是一款轻量级的日志处理器,常用于从各种数据源收集日志并将其发送到不同的目标,包括 AWS OpenSearch Service (AOS)。在真实的业务场景中往往存在多种类型的日志,例如系统日志、安全日志、应用日志等。不同类型的日志需要隔离保存并实现访问控制,在 AOS 中可以使用索引 Index 的设计实现数据的分类存储、访问控制以及生命周期管理。
使用 Amazon OpenSearch Service 中的 Amazon Q Developer 加速运营分析
现在,我很高兴地宣布 Amazon Q Developer 支持 Amazon OpenSearch Serv […]
使用 Amazon Managed Service for Apache Flink 进行 Apache Paimon CDC 数据摄取
Apache Paimon 是一个开源的开放数据湖表格式,提供强大的 CDC Ingestion 功能。在亚马逊云科技云中,可以向 Amazon EMR 集群中提交 CDC Ingestion Job 来使用 Apache Paimon CDC 的Ingestion 功能。本文将研究和实现使用 Amazon Managed Service for Apache Flink 以 Serverless 方式来运行 Apache Paimon CDC Ingestion Job。
AWS 一周综述:Omdia 认可、Amazon Bedrock RAG 评估、国际妇女节活动等(2025 年 3 月 24 日)
今年三月适逢国际妇女节,我有幸参加了上周末在深圳举办的“科技女性” (Women in Tech) 用户小组聚 […]
使用 Amazon MSK Connect 与 Iceberg Kafka Connect 轻松构建数据实时入湖
本文将介绍如何利用 Iceberg kafka connect ,通过 Amazon MSK Connect(托管 Kafka connect)来加速构建数据实时入湖的流程,简化从数据库到数据湖繁杂的同步过程。
AWS 一周综述:AWS Pi Day、Amazon Bedrock 多 Agents 协作、Amazon SageMaker Unified Studio、Amazon S3 表类数据存储服务等
感谢所有在 3 月 14 日参加我们第五届年度 AWS Pi Day 活动的朋友们。AWS Pi Day 在 […]
AWS Pi Day 2025:分析和人工智能的数据基础
每年的 3 月 14 日,AWS Pi Day 都会重点展示 AWS 在数据管理和处理方面的创新。该活动始于 […]
Amazon SageMaker Unified Studio 现已正式可用
现在,我们宣布 Amazon SageMaker Unified Studio 正式发布。这是一个集成的数据与 […]