Amazon MSK Replicator теперь поддерживает репликацию данных из внешних кластеров Apache Kafka, включая локальные, самостоятельно управляемые на AWS или у других облачных провайдеров, в стандартные брокеры Amazon MSK. Эта возможность расширяет поддержку репликации на стандартные брокеры MSK, в дополнение к существующей поддержке брокеров MSK Express. С этим запуском вы можете переносить рабочие нагрузки на стандартные брокеры MSK, обеспечивать аварийное восстановление, используя кластеры MSK в качестве целевых для отработки отказа или резервного копирования, а также обеспечивать распределение данных в гибридных и мультиоблачных средах. MSK Replicator — это функция Amazon MSK, которая автоматизирует репликацию данных между кластерами Kafka, устраняя необходимость в управлении пользовательской инфраструктурой репликации или настройке инструментов с открытым исходным кодом. Ранее MSK Replicator поддерживал репликацию только из внешних кластеров Apache Kafka в брокеры MSK Express. С этим запуском вы теперь также можете реплицировать данные из внешних кластеров Kafka в стандартные брокеры MSK, используя аутентификацию SASL/SCRAM или взаимный TLS (mTLS) для подключения к вашим внешним кластерам. Вы также можете использовать MSK Replicator для репликации данных из Amazon MSK Standard во внешние кластеры Kafka для надежного отката или распределения данных в мультиоблачных средах. В отличие от самостоятельно управляемых инструментов репликации, MSK Replicator позволяет сохранять исходные имена тем Kafka во время репликации, автоматически избегая бесконечных циклов репликации. Он также синхронизирует смещения групп потребителей в обоих направлениях, позволяя перемещать продюсеров и потребителей между кластерами независимо, в любом порядке, без ограничений координации или риска потери данных. Эта новая возможность поддерживается во всех регионах AWS, где доступен Amazon MSK Replicator. Посетите документацию по MSK Replicator, страницу продукта, страницу с ценами и этот пост в блоге AWS, чтобы узнать больше.