Google Cloud a annoncé le lancement de BigQuery tables for Apache Iceberg, un moteur de stockage entièrement géré et compatible avec Apache Iceberg. Cette solution offre des fonctionnalités telles que l'optimisation automatique du stockage, le clustering et l'ingestion en continu à haut débit. Les tables BigQuery pour Apache Iceberg utilisent le format Apache Iceberg pour stocker les données dans des buckets de stockage cloud appartenant aux clients, tout en offrant une expérience client et un ensemble de fonctionnalités similaires à ceux des tables BigQuery natives.
Un aspect intéressant de cette annonce est la capacité des tables BigQuery pour Apache Iceberg à répondre aux limites des formats de table open source. Avec les tables BigQuery pour Apache Iceberg, BigQuery se charge des tâches de maintenance des tables de manière autonome, sans intervention du client.
Par exemple, les tailles de fichiers optimales sont déterminées de manière adaptative en fonction de la taille de la table. Les tables BigQuery pour Apache Iceberg bénéficient de plus d'une décennie d'expertise dans l'exécution de l'optimisation automatique du stockage pour les tables BigQuery natives de manière efficace et rentable.
En résumé, cette nouvelle solution représente une solution prometteuse pour la gestion des données dans un environnement de type lakehouse, offrant aux clients un moyen plus efficace et rentable de stocker et de traiter leurs données.
