この記事では、AWS Spark Upgrade Agentを使用して、Amazon EMR Serverless上でSpark 3.5からSpark 4.0へのハンズオンPySpark移行をステップバイステップで解説します。エージェントがライブのAmazon EMR Serverlessアプリケーション上でアプリケーションを反復的に検証し、ジョブが成功するまでAmazon CloudWatchログから自動的に障害を診断および解決する様子をご覧いただけます。