RSS InfoQ

HadoopからKubernetesへ:AWS EKS上で動作するPinterestの拡張可能なSparkアーキテクチャ

Pinterestは、レガシーHadoopシステムからMokaプラットフォームへ移行し、AWS EKS上でKubernetesとSparkを活用することで、データインフラストラクチャを刷新しました。この戦略的な移行により、ジョブの分離性が向上し、デプロイが簡素化され、リソース管理が最適化され、コスト削減と効率改善につながりました。Eran Stiller著
favicon
infoq.com
From Hadoop to Kubernetes: Pinterest’s Scalable Spark Architecture on AWS EKS
記事の画像: HadoopからKubernetesへ:AWS EKS上で動作するPinterestの拡張可能なSparkアーキテクチャ