Pinterest는 기존의 고립된 솔루션의 불일치를 해결하기 위해 일반적인 변경 데이터 캡처(CDC) 솔루션을 구현했습니다. 이 새로운 시스템은 Red Hat Debezium을 활용하며 안정성, 확장성 및 짧은 지연 시간을 위해 설계되었습니다. 이 아키텍처는 시스템 상태 및 구성을 관리하는 제어 플레인을 데이터 플레인과 분리하여 변경 사항을 처리하고 Kafka로 보냅니다. Kafka는 사용자가 사용할 수 있는 CDC 데이터를 저장합니다. 이 구현은 확장성 문제, 시간 제한 재조정, 중복 작업을 포함한 몇 가지 문제를 극복했습니다. 솔루션에는 부트스트래핑, 속도 제한, 시간 제한 구성 조정 및 Kafka 업그레이드가 포함되었습니다. 이러한 개선으로 시스템 성능이 안정되고 장애 조치 복구 시간이 크게 단축되었습니다. 향후 계획에는 확장성 향상, CDC를 사용한 재해 복구 구현, 실시간에 가까운 데이터베이스 수집 시스템 구축 등이 포함됩니다. 이 프로젝트의 성공에는 여러 Pinterest 팀의 참여가 있었습니다. 마지막으로 블로그 게시물에는 상표에 대한 면책 조항이 포함되어 있습니다.