Google Cloud 宣布推出适用于 Apache Iceberg 的 BigQuery 表,这是一个由 BigQuery 提供的完全托管且与 Apache Iceberg 兼容的存储引擎。此解决方案提供诸如自主存储优化、集群和高吞吐量流式摄取等功能。适用于 Apache Iceberg 的 BigQuery 表使用 Apache Iceberg 格式将数据存储在客户拥有的云存储桶中,同时提供与 BigQuery 原生表类似的客户体验和功能集。
此公告的一个有趣方面是适用于 Apache Iceberg 的 BigQuery 表能够解决开源表格式的局限性。借助适用于 Apache Iceberg 的 BigQuery 表,BigQuery 可以自主地处理表维护任务,而无需客户费力。
例如,最佳文件大小是根据表的大小自适应确定的。适用于 Apache Iceberg 的 BigQuery 表受益于十多年来高效且经济高效地运行 BigQuery 原生表的自动存储优化的专业知识。
简而言之,此新解决方案代表了 lakehouse 环境中数据管理的有希望的解决方案,为客户提供了更有效且更具成本效益的方式来存储和处理其数据。