Amazon EMR Serverless 现已支持更大的工作节点规模,以运行计算和内存密集型工作负载。
Amazon EMR Serverless 现已提供更大的 Worker 配置,支持 32 vCPU 及高达 244 GB 内存,使您能够运行更多计算和内存密集型工作负载。此前,EMR Serverless 上可用的最大 Worker 配置为 16 vCPU 及高达 120 GB 内存。更大的 Worker 有助于提升工作负载的运行性能及成本效益。对于 Shuffle 密集型工作负载,更大的 Worker 可减少执行器之间低效的数据传输。对于存在数据倾斜的作业,更大的 Worker 可降低内存溢出失败的风险。对于需要缓存数据的作业,更大的 Worker 允许在内存中保留更多数据,从而提升作业性能。为充分利用这些优势,我们建议对计算和内存密集型的 Spark 及 Hive 工作负载使用更大的 Worker。如需了解不同的 Worker 配置,请访问 EMR Serverless 文档。更大的 Worker 在所有提供 EMR Serverless 的 AWS 区域均可用。