In diesem Beitrag wird erläutert, wie man eine vollständig automatisierte, geplante Spark-Verarbeitungspipeline mit Amazon EMR on EC2 erstellt, die mit Step Functions orchestriert und von EventBridge ausgelöst wird. Wir zeigen, wie man diese Lösung mit AWS CloudFormation bereitstellt, COVID-19-Public-Dataset-Daten in Amazon Simple Storage Service (Amazon S3) verarbeitet und die aggregierten Ergebnisse in Amazon S3 speichert.