AWS a annoncé le lancement en avant-première des métadonnées d'objets interrogeables pour les compartiments Amazon S3. Cette fonctionnalité permet aux utilisateurs d'interroger les métadonnées des objets dans les compartiments S3 à l'aide d'outils compatibles avec Iceberg tels qu'Athena, Redshift, QuickSight et Spark. Cela répond au défi de la gestion de quantités massives de données sur S3, car les utilisateurs peuvent désormais rechercher des objets en fonction de critères spécifiques tels que la clé, la taille et les balises. Grâce à cette fonctionnalité, les utilisateurs peuvent améliorer leurs flux de travail d'analyse de données, de traitement de données et d'apprentissage automatique. Un aspect intéressant de cette fonctionnalité est sa capacité à capturer automatiquement des métadonnées riches lorsque des objets S3 sont ajoutés ou modifiés. Ces métadonnées sont stockées dans des tables Apache Iceberg entièrement gérées, ce qui permet des requêtes efficaces. Cela sera particulièrement utile pour les organisations qui utilisent S3 pour stocker de grands ensembles de données et qui ont besoin d'un moyen efficace de trouver des objets spécifiques dans ces ensembles de données. Cette fonctionnalité simplifiera la découverte de données et améliorera l'efficacité globale.
Métadonnées d'objets interrogeables pour les compartiments Amazon S3 (aperçu)
AWS