Construire un pipeline d'analytique résilient aux changements de schéma Avro en utilisant Amazon Athena

Ce billet de blog montre comment construire une solution en combinant le service de stockage d'objets Amazon Simple Storage Service (Amazon S3) pour le stockage de données, le catalogue de données AWS Glue pour la gestion des schémas, et Amazon Athena pour les requêtes ponctuelles. Nous nous concentrerons spécifiquement sur la gestion des données au format Avro dans des buckets S3 partitionnés, où les schémas peuvent changer fréquemment, tout en offrant des capacités de requête cohérentes sur toutes les données, indépendamment des versions de schéma.