이번 일반 공급 발표를 통해 Spark 4.0은 Amazon EMR Serverless, Amazon EMR on EC2, Amazon EMR on EKS 배포 옵션 전반에서 지원됩니다. 이 게시물에서는 Spark Connect, Variant 데이터 타입, SQL 스크립팅, Python API 개선 사항, 스트리밍 개선 사항을 포함하여 Amazon EMR에서 현재 사용 가능한 주요 Spark 4.0 기능과 새로운 emr-spark-8.0 릴리스의 인프라 변경 사항에 대해 알아보겠습니다.