С этим объявлением об общедоступности Spark 4.0 теперь поддерживается в бессерверных инстансах Amazon EMR, Amazon EMR на EC2 и Amazon EMR на EKS. В этой статье вы узнаете о ключевых возможностях Spark 4.0, доступных в Amazon EMR, включая Spark Connect, тип данных Variant, SQL-скриптинг, улучшения API Python и улучшения потоковой передачи, а также об изменениях в инфраструктуре в новом выпуске emr-spark-8.0.