El catálogo de datos de AWS Glue ahora admite la optimización automática de tablas de Apache Iceberg a través de Amazon VPC

El catálogo de datos de AWS Glue ahora admite la optimización automática de tablas de Apache Iceberg que solo se pueden acceder desde un entorno específico de Amazon Virtual Private Cloud (VPC). Puedes habilitar la optimización automática proporcionando una configuración de VPC para optimizar el almacenamiento y mejorar el rendimiento de las consultas mientras mantienes tus tablas seguras. El catálogo de datos de AWS Glue admite la compactación, la retención de instantáneas y la gestión de archivos no referenciados que te ayudan a reducir la sobrecarga de metadatos, controlar los costos de almacenamiento y mejorar el rendimiento de las consultas. Los clientes que tienen configuraciones de gobernanza y seguridad que requieren que un bucket de Amazon S3 resida dentro de un VPC específico ahora pueden utilizarlo con el catálogo de Glue. Esto te brinda capacidades más amplias para la gestión automática de tus datos de Apache Iceberg, independientemente de dónde estén almacenados en Amazon S3. La optimización automática para tablas de Iceberg a través de Amazon VPC está disponible en 13 regiones de AWS: EE. UU. Este (N. Virginia, Ohio), EE. UU. Oeste (Oregón), Europa (Irlanda, Londres, Fráncfort, Estocolmo), Asia Pacífico (Tokio, Seúl, Mumbai, Singapur, Sídney), Sudamérica (São Paulo). Los clientes pueden habilitar esto a través de la consola de AWS, la CLI de AWS o los SDK de AWS. Para empezar, ahora puedes proporcionar la conexión de red de Glue como configuración adicional junto con ajustes de optimización como período de retención predeterminado y días para mantener archivos no referenciados. El catálogo de datos de AWS Glue utilizará la información de VPC en la conexión de Glue para acceder a buckets de Amazon S3 y optimizar tablas de Apache Iceberg. Para obtener más información, lee el blog y visita la documentación del catálogo de datos de AWS Glue.