AWS 宣布推出适用于 Amazon S3 存储桶的可查询对象元数据(预览版)。此功能允许用户使用兼容 Iceberg 的工具(如 Athena、Redshift、QuickSight 和 Spark)查询 S3 存储桶中的对象元数据。这解决了在 S3 上管理海量数据的挑战,因为用户现在可以根据特定条件(如键、大小和标签)搜索对象。借助此功能,用户可以改进其数据分析、数据处理和 AI 培训工作流程。此功能的一个有趣方面是它能够在添加或修改 S3 对象时自动捕获丰富的元数据。此元数据存储在完全托管的 Apache Iceberg 表中,从而可以进行高效查询。这对于使用 S3 存储大型数据集并且需要一种有效方法来查找这些数据集中的特定对象的组织特别有用。此功能将简化数据发现并提高整体效率。
适用于 Amazon S3 存储桶的可查询对象元数据(预览版)
AWS