Google обновил справочный документ под названием "Как исправить: Google StoreBot crawler не может получить доступ к вашей странице товара в магазине". Документ содержит ряд крупных обновлений с множеством уточнений, включая user-agents, проверку robots.txt, блокировку IP-адресов, проблемы со скоростью загрузки страниц, повторную обработку и время, необходимое для повторной обработки ваших целевых страниц.