RSS Обновления здоровья облачных сервисов Google

RSS Обновления здоровья облачных сервисов Google
Подписаться

status.cloud.google.com - это официальная панель состояния облачных служб Google. Она предоставляет информацию в режиме реального времени о текущем состоянии различных облачных служб Google, включая Compute Engine, App Engine, Cloud Storage и другие. На сайте отображается список всех облачных служб Google, а также их текущий статус, который может быть одним из следующих: - Зеленый: Служба работает нормально. - Желтый: Служба испытывает частичное отключение или деградацию. - Красный: Служба испытывает полный перебой. Для каждого сервиса на сайте также отображается краткое описание проблемы, если таковая имеется, и время ее возникновения. Кроме того, на сайте представлена история прошлых инцидентов и отключений для каждого сервиса. Сайт обновляется в режиме реального времени, что позволяет пользователям быстро проверять состояние облачных сервисов Google и планировать соответствующие действия. Это полезный ресурс для разработчиков, администраторов и пользователей, которые полагаются на облачные сервисы Google для своих приложений и рабочих нагрузок. На сайте также представлены ссылки на отчеты об инцидентах и анализ первопричин прошлых сбоев, что может быть полезно для понимания того, что именно пошло не так и как Google Cloud работает над предотвращением подобных проблем в будущем. В целом, Google Cloud Status Dashboard - это прозрачный и информативный ресурс, который помогает пользователям всегда быть в курсе состояния облачных сервисов Google.

Google Cloud Service Health Updates status.cloud.google.com

RSS status.cloud.google.com

RSS Hunter • 22 авг. 2024 г.

Трэд заметок

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Сетевой трафик к Google Cloud из Индии, в частности из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические сбои. Эти сбои проявляются в виде повышенной задержки и возможной потери пакетов для затронутых клиентов. Проблема вызвана перенаправлением трафика из-за инцидента на объекте в Дели, что привело к перегрузке региональных мощностей. В результате, часть клиентов Hybrid Connectivity и Virtual Private Cloud сталкивается с всплесками задержки. Клиенты Media CDN также могут наблюдать увеличение задержек. Первоначальные меры по смягчению последствий позволили восстановить часть пропускной способности граничных узлов интернета в Дели. Завершается расширение пропускной способности граничных узлов интернета за пределами региона в Ченнаи. Сетевые магистрали были оптимизированы, а пропускная способность магистрали в Дели увеличена. Дополнительная пропускная способность была восстановлена между Дели-Ченнаи и Дели-Мумбаи. Клиенты могут испытывать незначительное увеличение задержки до полного восстановления затронутого объекта, в настоящее время обходных путей нет.

UPDATE: Network traffic to Google Cloud originating from Delhi, Chennai, Mumbai and surrounding areas is experiencing intermittent periods of elevated latency and possible packet loss. status.cloud.google.com

RSS Hunter • Вчера

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Сетевой трафик к Google Cloud из Индии, в частности из Дели, Ченнаи и Мумбаи, испытывает повышенную задержку и возможную потерю пакетов. Эта проблема вызвана пожаром в стороннем центре обработки данных в Дели, который привел к экстренному отключению сетевого оборудования. Это событие изолировало локальную точку присутствия и снизило общую пропускную способность сети в регионе. Google Cloud перенаправил трафик из пострадавшего объекта в Дели, чтобы компенсировать снижение локальных возможностей обслуживания. В результате некоторые клиенты Hybrid Connectivity и Virtual Private Cloud могут испытывать периодические всплески задержки из-за ограничений пропускной способности в индийских метрополиях и у интернет-провайдеров. Клиенты Media CDN также могли заметить более высокие, чем обычно, задержки. Первоначальные меры по смягчению последствий показали положительные результаты, включая восстановление части пропускной способности интернет-пиринга в Дели. Принимаются дальнейшие меры, такие как увеличение пропускной способности интернет-пиринга за пределами региона в Ченнаи и оптимизация сетевых магистралей. Эти меры направлены на увеличение доступного резерва и обеспечение дополнительной балансировки нагрузки. Google Cloud продолжит внимательно следить за производительностью сети и предоставит следующее обновление к среде, 17 июня 2026 года, в 17:00 PDT.

RSS Hunter • 15 июн.

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Сетевой трафик в Google Cloud из Индии испытывает периодические задержки и потери пакетов. Это связано с пожаром в стороннем центре обработки данных в Дели, который привел к аварийному отключению электроэнергии. Инцидент привел к изоляции локальной точки присутствия сети и снижению общей пропускной способности в столичной области. Перенаправление значительного трафика из пострадавшего объекта в Дели повлияло на некоторых клиентов Hybrid Connectivity и Virtual Private Cloud. Эти клиенты могут испытывать всплески задержек, поскольку спрос превышает доступную пропускную способность в индийских регионах. Первоначальные меры по снижению трафика показали некоторые положительные результаты для определенных клиентов. Google активно работает над увеличением пропускной способности интернет-пиринга в Дели для улучшения локальных задержек. Они также увеличивают региональную пиринговую пропускную способность в Ченнаи. Дальнейшее увеличение пропускной способности магистральной сети Дели ожидается к середине июня. Google продолжит отслеживать производительность сети и предоставит следующее обновление к 15 июня.

RSS Hunter • 12 июн.

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Пожар в стороннем центре обработки данных в Дели вызвал аварийное отключение электроэнергии, что повлияло на сетевое оборудование. Это событие привело к периодическому повышению задержки и возможной потере пакетов для трафика Google Cloud, исходящего из Дели, Ченнаи, Мумбаи и прилегающих районов. Инцидент привел к изоляции местного пункта присутствия (PoP) в Дели и снижению общей пропускной способности сети в метрополии. Google Cloud перенаправил значительный трафик из пострадавшего объекта в Дели, чтобы компенсировать снижение местных возможностей обслуживания. В результате некоторые клиенты Hybrid Connectivity и Virtual Private Cloud могут испытывать всплески задержки из-за увеличения спроса на существующие мощности в индийских метрополиях и у интернет-провайдеров. Первоначальные меры по смягчению последствий показали некоторые положительные результаты для клиентов. Дальнейшие действия включают в себя получение дополнительной пропускной способности для пиринга на интернет-границах для повышения устойчивости сети. Google Cloud также оптимизирует пропускную способность по своим сетевым магистралям, чтобы обеспечить большее пространство для клиентов VPC в пострадавшем регионе. Планируется расширить местный PoP в Дели и мигрировать избранных пиринговых партнеров для увеличения региональной пропускной способности. Клиенты могут испытывать временно повышенную задержку и неоптимальную маршрутизацию до полного восстановления пострадавшего объекта.

RSS Hunter • 11 июн.

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Google Cloud испытывает сетевые проблемы, затрагивающие трафик из Дели, Ченнаи, Мумбаи и прилегающих районов. Пожар в стороннем центре обработки данных в Дели вызвал аварийное отключение электропитания сетевого оборудования. Этот инцидент привел к изоляции локальной точки присутствия и снижению общей пропускной способности сети в регионе. В результате некоторые клиенты Hybrid Connectivity и Virtual Private Cloud могут наблюдать периодические всплески задержки. Перенаправление трафика для компенсации сниженных локальных возможностей обслуживания привело к этой проблеме. Спрос в настоящее время превышает доступную пропускную способность в индийских мегаполисах и региональных интернет-провайдерах. Google активно изучает дальнейшие меры по смягчению последствий трафика и расширяет пиринг на границах Интернета. Они также сотрудничают с местными партнерами-интернет-провайдерами для устранения последствий незапланированных сбоев. Пострадавшие клиенты могут испытывать незначительное повышение задержки и неоптимальное маршрутизацию до восстановления работы объекта. В настоящее время обходных путей для этих сетевых сбоев нет.

RSS Hunter • 10 июн.

ОБНОВЛЕНИЕ: Сетевой трафик к Google Cloud, исходящий из Дели, Ченнаи, Мумбаи и прилегающих районов, испытывает периодические периоды повышенной задержки и возможной потери пакетов.

Пожар в стороннем центре обработки данных в Дели вызвал аварийное отключение электроэнергии. Это событие привело к изоляции местного сетевого узла присутствия и снижению общей пропускной способности сети в столичном регионе Дели. В результате Google Cloud столкнулся с периодическим повышением задержки и возможной потерей пакетов для трафика, исходящего из Дели, Ченнаи, Мумбаи и прилегающих регионов. Проблема началась 9 июня 2026 года в 11:22 по тихоокеанскому времени США. Google перенаправил значительную часть трафика из пострадавшего объекта в Дели, чтобы компенсировать снижение местных возможностей обслуживания. Это перенаправление затронуло часть клиентов Hybrid Connectivity и Virtual Private Cloud. Эти клиенты могут наблюдать периодические всплески задержки, поскольку спрос превышает доступную пропускную способность в столичных городах Индии и у региональных интернет-провайдеров. Google активно изучает дополнительные меры по смягчению последствий трафика и усилению пиринга на интернет-границах. В настоящее время для пострадавших клиентов нет обходных путей. Следующее обновление по данному инциденту запланировано на 10 июня 2026 года в 17:00 по тихоокеанскому времени США.

RSS Hunter • 10 июн.

РЕШЕНО: Клиенты Vertex AI Gemini API столкнулись с увеличением частоты ошибок при доступе к глобальной конечной точке.

27 февраля 2026 года API Vertex AI Gemini столкнулся с сбоем, затронувшим несколько сервисов. Инцидент начался в 04:37 и продлился почти два часа, затронув пользователей в регионах США и по всему миру. Основная проблема заключалась в увеличении частоты ошибок у клиентов, использующих различные модели Gemini. Первопричиной стало ошибочное изменение конфигурации службы фильтрации безопасности. Это изменение вызвало сбои в работе сервиса и потерю мощности, что привело к ошибкам 429 и 503. Инженеры Google были оповещены в 04:54 и оперативно приступили к расследованию. Они откатили изменение конфигурации и добавили мощности для полного восстановления сервиса к 06:35. Среди затронутых продуктов были Agent Assist, Dialogflow CX и Google Cloud Support. Google внедряет более строгие процедуры проверки развертывания и улучшенные системы оповещения. Клиенты PayGo в основном сталкивались с ошибками 429, в то время как клиенты Provisioned Throughput видели ошибки 503. Проблема затронула глобальную конечную точку и несколько локаций в США.

RESOLVED: Vertex AI Gemini API customers experienced increased error rates when accessing the global endpoint. status.cloud.google.com

RSS Hunter • 9 мар.

РЕШЕНО: Клиенты Vertex AI Gemini API столкнулись с увеличением частоты ошибок при доступе к глобальной конечной точке.

27 февраля 2026 года с 04:37 до 06:35 по тихоокеанскому времени (США) произошел сбой в работе моделей Vertex AI Gemini API. Этот инцидент привел к увеличению частоты ошибок у пользователей различных версий Gemini, включая предварительные версии. Пострадали такие сервисы, как Google Cloud Support, Agent Assist, Vertex Gemini API и Dialogflow CX в регионах США и по всему миру. Основной причиной стало проблемное изменение конфигурации службы фильтрации безопасности, поддерживающей все модели Gemini. Это изменение привело к взаимодействиям, которые вызвали перебои в работе сервиса и ошибки, такие как 429 и 503. Инженеры Google были оповещены в 04:54 и немедленно приступили к расследованию проблемы. Решение заключалось в откате к предыдущей конфигурации и добавлении дополнительных мощностей сервиса. Полное восстановление работы сервиса было достигнуто к 06:35, когда откат был полностью завершен. Клиенты PayGo в основном сталкивались с ошибками 429, а клиенты Provisioned Throughput получали ошибки 503. Сбой затронул несколько регионов США и локации в Северной и Южной Америке. Google проводит полный анализ первопричин и опубликует окончательный отчет об инциденте с профилактическими мерами. Google приносит извинения за неудобства и предпринимает шаги для повышения надежности платформы.

RESOLVED: Vertex AI Gemini API customers experienced increased error rates when accessing the global endpoint. status.cloud.google.com

RSS Hunter • 5 мар.

РЕШЕНО: Клиенты Vertex AI Gemini API столкнулись с увеличением частоты ошибок при доступе к глобальной конечной точке.

27 февраля 2026 года произошел инцидент, повлиявший на глобальную конечную точку Vertex Gemini API. Это привело к увеличению частоты ошибок у клиентов, использующих несколько моделей Gemini через глобальную конечную точку. Инцидент начался в 4:36 утра по тихоокеанскому стандартному времени и продолжался до 6:45 утра по тихоокеанскому стандартному времени. Несколько сервисов Google, включая Dialogflow CX и Agent Assist, пострадали из-за их зависимости от API Gemini. Основной причиной, по-видимому, является недавнее изменение конфигурации. Проблема была решена путем отката проблемного изменения конфигурации. Восстановление сервиса привело к полному устранению проблемы, позволив системам функционировать корректно. Проблема затронула клиентов в нескольких географических точках, включая Северную и Южную Америку. Google выражает благодарность клиентам за терпение во время инцидента. Пострадавшие продукты включали Agent Assist, Dialogflow CX, Google Cloud Support и сам Vertex Gemini API.

RESOLVED: Vertex AI Gemini API customers experienced increased error rates when accessing the global endpoint. status.cloud.google.com

RSS Hunter • 27 февр.

РЕШЕНО: Мы расследуем повышенный уровень ошибок в работе нескольких продуктов в регионе us-east1.

18 июля 2025 года в регионе us-east1 произошел сбой в работе сервисов Google Cloud Platform (GCP) и Google Workspace (GWS), который длился до 1 часа 57 минут. Инцидент начался в 7:42 утра и завершился в 9:47 утра по тихоокеанскому времени. Причиной послужила процедурная ошибка во время запланированной замены оборудования, приведшая к неверному отключению сетевого коммутатора. Это привело к разделению плоскости управления сетью, в результате чего возникла устаревшая информация о топологии и потеря пакетов. Проблема была выявлена в 7:06 утра, и немедленно начались работы по устранению. Для смягчения последствий трафик был перенаправлен, при этом сервисы Workspace были восстановлены к 8:40 утра. Полное восстановление сервисов было достигнуто в 9:47 утра. Инцидент затронул множество продуктов GCP и GWS, в основном на юго-востоке США. Google внедряет средства контроля безопасности и профилактические меры для предотвращения повторения подобных ситуаций. Небольшой процент постоянных дисков был временно недоступен, но потеря данных не произошла.

RESOLVED: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 22 июл. 2025 г.

РЕШЕНО: Мы расследуем повышенные уровни ошибок в нескольких продуктах в us-east1

Произошел сбой/отказ в работе 18 июля 2025 года между 07:42 и 09:47 по времени US/Pacific. Инцидент затронул несколько продуктов Google Cloud Platform (GCP) и Google Workspace (GWS) в регионе us-east1. Влияние на GCP длилось 1 час и 37 минут, а на GWS - 30 минут. Проблема вызвала повышенные задержки и ошибки в затронутом регионе. Причиной инцидента стал процедурный ошибок во время планового технического обслуживания оборудования в одном из центров обработки данных Google в регионе us-east1. Инженерная команда устранила проблему, отводя трафик от кластеров и восстанавливая затронутое оборудование. Полный отчет об инциденте будет готов в ближайшие дни, содержащий полную причину и меры предотвращения. Затронутые продукты испытывали повышенные задержки и ошибки в регионе us-east1. Инцидент затронул широкий спектр продуктов GCP и GWS, включая AlloyDB для PostgreSQL, Apigee, Gmail, Google Meet и многие другие. Затронутым местом была Южная Каролина (us-east1)

RESOLVED: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

РЕШЕНО: Мы расследуем повышенные уровни ошибок, затрагивающие несколько продуктов в us-east1.

Инцидент произошел 18 июля 2025 года между 7:42 и 9:47 утра по тихоокеанскому времени. Проблема была решена для всех затронутых продуктов к 9:47 утра по тихоокеанскому времени. Предварительный анализ указывает на то, что повышенная потеря пакетов во время рутинного обслуживания сети в зоне us-east1-b стала причиной нарушения работы сервиса. Полный отчет об инциденте с указанием корневой причины будет опубликован после завершения внутреннего расследования. Компания благодарит пользователей за терпение во время процесса решения проблемы. Инцидент затронул несколько продуктов, включая AlloyDB для PostgreSQL, Apigee, Artifact Registry и многие другие. Эти продукты были затронуты в локации Южная Каролина (us-east1). Инцидент не затронул другие локации. Компания все еще расследует корневую причину проблемы. Подробный отчет будет опубликован после завершения расследования.

RESOLVED: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

ОБНОВЛЕНИЕ: Мы расследуем повышенный уровень ошибок, затрагивающий несколько продуктов в us-east1

Инцидент произошел 18 июля 2025 года, начавшись в 07:42 по времени US/Pacific и закончившись в 09:47 по времени US/Pacific. Проблема затронула контрольную плоскость сети в зонах us-east1, но инженеры успешно восстановили ее. Многие сервисы сейчас сообщают о полном восстановлении, и инженеры продукта продолжают проверять оставшиеся сервисы. Подверглись воздействию широкий спектр сервисов Google Cloud, включая AlloyDB для PostgreSQL, Apigee и Google Cloud Storage. Другие затронутые продукты включают Cloud Billing, Cloud Build, Cloud External Key Manager и Cloud Firestore, среди многих других. Инцидент также повлиял на различные сервисы Google Cloud, такие как Google App Engine, Google BigQuery и Google Cloud SQL. Затронутым местом была Южная Каролина, конкретно зоны us-east1. Инженеры все еще работают над тем, чтобы обеспечить полную работоспособность всех сервисов, и ожидается обновление с более подробной информацией к 11:00 AM US/Pacific 18 июля 2025 года. Работы по восстановлению продолжаются, и команда работает над предотвращением подобных инцидентов в будущем. Инцидент был разрешен, но команда будет продолжать мониторить ситуацию, чтобы убедиться, что все сервисы стабильны и функционируют как ожидается.

UPDATE: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

ОБНОВЛЕНИЕ: Мы расследуем повышенные уровни ошибок с несколькими продуктами в us-east1

Инцидент произошел 18 июля 2025 года с 7:42 до 9:47 по тихоокеанскому времени США. Инженерам удалось восстановить управляющий сетевой узел в затронутых зонах us-east1. Несколько служб сообщают о полном восстановлении, и инженеры продукта проверяют остальные службы. Следующее обновление с более подробной информацией будет предоставлено к 10:30 по тихоокеанскому времени США 18 июля 2025 года. Инцидент затронул различные продукты Google Cloud, включая Apigee, Artifact Registry, Cloud Build и многие другие. Затронутые продукты также включают Google App Engine, Google BigQuery, Google Cloud Bigtable и Google Cloud Console, среди прочих. Инцидент затронул районы Южной Каролины, в частности зоны us-east1. Усилия по восстановлению продолжаются, инженеры работают над проверкой оставшихся служб. Инцидент устранен, и службы возвращаются в нормальное состояние. Будут предоставлены дальнейшие обновления для обеспечения полной прозрачности и решения проблемы.

UPDATE: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

ОБНОВЛЕНИЕ: Мы расследуем повышенные уровни ошибок, затрагивающие несколько продуктов в us-east1.

Инцидент начался 18 июля 2025 года в 07:42 и закончился 18 июля 2025 года в 09:47 (все время указано по тихоокеанскому времени США). Наши инженеры подтвердили, что зона us-east1-b частично затронута. Все остальные зоны в us-east1 в настоящее время работают в нормальном режиме. Наши инженеры восстановили вышедшее из строя оборудование и в настоящее время восстанавливают сетевую управляющую плоскость в затронутых зонах. Мы предоставим следующее обновление к 10:00 по тихоокеанскому времени США 18 июля 2025 года. Затронутые продукты: Cloud External Key Manager, Cloud HSM, Cloud Key Management Service, Cloud Run, Dialogflow CX, Google App Engine, Google Cloud Bigtable, Google Cloud Dataproc, Google Cloud SQL, Google Cloud Storage, Google Cloud Support, Google Compute Engine, Google Kubernetes Engine, Hybrid Connectivity, Identity and Access Management, Secret Manager, Virtual Private Cloud (VPC) Затронутые местоположения: Южная Каролина (us-east1)

UPDATE: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

ОБНОВЛЕНИЕ: Мы расследуем повышенные уровни ошибок с несколькими продуктами в us-east1

Инцидент начался 18.07.2025 в 07:06 (все время указано US/Pacific). В настоящее время мы наблюдаем повышенную задержку и частоту ошибок для нескольких облачных сервисов в регионе us-east1, начиная с 7:06 утра по тихоокеанскому времени сегодня, 18 июля 2025 года. Наше первоначальное расследование указывает на сбой аппаратной инфраструктуры как на вероятную причину. Приносим извинения за любые неудобства, которые это может вызвать. Мы предоставим обновленную информацию с более подробными сведениями к 9:15 утра по тихоокеанскому времени сегодня. Затронутые продукты: Cloud Run, Dialogflow CX, Google App Engine, Google Cloud Bigtable, Google Cloud Dataproc, Google Cloud SQL, Google Cloud Storage, Google Cloud Support, Google Compute Engine, Google Kubernetes Engine, Hybrid Connectivity, Virtual Private Cloud (VPC) Затронутые местоположения: Южная Каролина (us-east1)

UPDATE: We are investigating elevated error rates with multiple products in us-east1 status.cloud.google.com

RSS Hunter • 18 июл. 2025 г.

РЕШЕНО: Несколько продуктов GCP испытывают проблемы с обслуживанием

12 июня 2025 года Google Cloud, Workspace и Security Operations столкнулись с увеличением ошибок 503 в внешних запросах API из-за ошибочного изменения кода в Service Control. Новая функция, добавленная 29 мая 2025 года, не имела надлежащей обработки ошибок и защиты флагов функций. Изменение политики 12 июня вызвало нулевую ссылку, что привело к краху бинарного файла Service Control сначала в региональном, а затем в глобальном масштабе. Команда инженерии надежности сайта определила коренную причину в течение 10 минут и реализовала "красную кнопку", чтобы отключить проблемный путь обслуживания. Восстановление началось в течение 40 минут, но более крупные регионы, такие как us-central-1, столкнулись с перегрузкой из-за "эффекта стада". Полное решение проблемы в us-central-1 заняло примерно 2 часа и 40 минут, с перенаправлением трафика и ограничением создания задач. Google приостановила изменения в стеке Service Control и будет сосредоточена на модульной архитектуре. Они будут проводить аудит систем, использующих глобально реплицированные данные, обеспечивать флаги функций для критически важных бинарных файлов и улучшать обработку ошибок и тестирование. Google также планирует улучшить внешние коммуникации и обеспечить работоспособность инфраструктуры мониторинга во время простоев. Многие продукты Google Cloud в различных регионах пострадали от этого инцидента.

RESOLVED: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 13 июн. 2025 г.

РЕШЕНО: Множественные продукты GCP испытывают проблемы с сервисом

Инцидент в Google Cloud и Workspace произошел 12 июня 2025 года с 10:49 до 13:49 по тихоокеанскому времени США, продолжавшийся 3 часа. Инцидент привел к увеличению ошибок 503 при внешних запросами к API, что повлияло на доступ клиентов по всему миру. Неправильное автоматическое обновление квоты в системе управления API стало причиной отказов. Восстановление включало обход проблемной проверки квоты, что привело к восстановлению большинства регионов в течение двух часов. Регион us-central1 испытал более длительное восстановление из-за перегрузки базы данных. Некоторые продукты испытывали остаточные последствия в течение часа, а другие восстановились позже. Google готовит подробный отчет об инциденте, в котором будут описаны причины и меры по устранению. Будут реализованы меры для предотвращения сбоев в управлении API, ускорения распространения метаданных и улучшения обработки ошибок. Инцидент затронул множество продуктов Google Cloud и Workspace, включая Compute Engine, BigQuery, Gmail и Google Calendar. Влияние распространилось на различные глобальные локации.

RESOLVED: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 13 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент, повлиявший на Vertex AI Online Prediction и другие сервисы Google, начался 12 июня 2025 года в 10:51 по тихоокеанскому времени. Инцидент вызвал увеличение ошибок 5xx у некоторых моделей Model Garden. Основная проблема была решена к 17:05 по тихоокеанскому времени, что восстановило нормальную работу Vertex AI в большинстве регионов. Однако регионы europe-west1 и asia-southeast1 по-прежнему испытывали проблемы с емкостью. Инженеры активно работают над восстановлением нормальной емкости в этих двух оставшихся регионах. Ожидаемое время полного решения в europe-west1 и asia-southeast1 - 19:45 по тихоокеанскому времени. Обновление ситуации будет предоставлено к 19:45 по тихоокеанскому времени в тот же день. Широкий спектр продуктов и сервисов Google был затронут этим инцидентом. Инцидент затронул большое количество местоположений в нескольких регионах по всему миру.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 13 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент, затронувший несколько продуктов Google Cloud и локаций, начался 12 июня 2025 года в 10:51 по тихоокеанскому времени. Личная служба здоровья системы сейчас решена и отражает точные обновления. Проблема, затронувшая Google Cloud Dataflow, была полностью решена к 17:10 по тихоокеанскому времени. Однако Vertex AI Online Prediction по-прежнему испытывает повышенный уровень ошибок 5xx, особенно с моделями в Саду моделей. Инженеры работают над уменьшением этих ошибок, и наблюдается постепенное уменьшение уровня ошибок. Оценка времени полного решения проблемы Vertex AI Online Prediction составляет 22:00 по тихоокеанскому времени. Широкий спектр сервисов Google Cloud был затронут, включая API Gateway, AlloyDB, Cloud Run, BigQuery и другие. Инцидент затронул различные географические локации в Азии, Европе, Северной Америке, Южной Америке и других регионах. Обновление с последними деталями будет предоставлено к 22:00 по тихоокеанскому времени 12 июня 2025 года. Клиенты должны ожидать продолжающихся ошибок на Vertex AI до указанного времени.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 13 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент, затронувший несколько продуктов Google Cloud, начался 12 июня 2025 года в 10:51 по тихоокеанскому времени и закончился в 18:18 по тихоокеанскому времени. Остаточные последствия сохраняются для Google Cloud Dataflow, особенно в регионе us-central1, где продолжается очистка очереди. Клиенты могут испытывать задержки с операциями Dataflow в регионе us-central1, без указания срока полного восстановления. Пользователи Vertex AI Online Prediction могут по-прежнему сталкиваться с ошибками 5xx сertain Model Garden моделями. Инженеры работают над устранением ошибок, стремясь к полному решению к 22:00 по тихоокеанскому времени. Личные обновления состояния здоровья сервиса откладываются; пользователи должны обращаться к панели мониторинга здоровья сервиса Cloud. Широкий спектр продуктов Google Cloud был затронут, включая API Gateway, BigQuery, Compute Engine и Cloud Storage. Инцидент затронул различные локации по всему миру, включая Азию, Европу и Северную и Южную Америку. Следующее обновление будет предоставлено 12 июня 2025 года в 17:45 по тихоокеанскому времени.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 13 июн. 2025 г.

ОБНОВЛЕНИЕ: В работе нескольких продуктов GCP наблюдаются проблемы.

Инцидент начался 12 июня 2025 года в 10:51 по тихоокеанскому времени США. Продукты Google Cloud по-прежнему испытывают остаточные последствия, включая задержки в операциях Dataflow и повышенное количество ошибок 5xx с некоторыми моделями Vertex AI Online Prediction. Персонализированные обновления Service Health задерживаются, и клиентам рекомендуется использовать панель Cloud Service Health для получения актуальной информации. В настоящее время нет предполагаемого времени полного устранения проблем с этими сервисами. Обновление с текущими подробностями будет предоставлено к 17:00 по тихоокеанскому времени. Инцидент затронул несколько продуктов, включая API Gateway, Cloud Data Fusion, Cloud Firestore и многие другие. В число затронутых регионов входят Йоханнесбург, Тайвань, Гонконг, Токио и многие другие по всему миру. Инцидент повлиял на несколько местоположений, включая asia-south1, asia-northeast1, europe-central2 и другие. Подробный список затронутых продуктов и местоположений представлен. Инцидент все еще продолжается, и клиентам рекомендуется следить за ситуацией для получения обновлений.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Несколько продуктов GCP испытывают проблемы с обслуживанием.

Инцидент в Google Cloud начался 12 июня 2025 года в 10:51 утра по тихоокеанскому времени. Большинство продуктов Google Cloud полностью восстановлены по состоянию на 1:45 дня по тихоокеанскому времени. Однако некоторые продукты все еще затронуты, и пользователям следует продолжать следить за сервисами и панелью управления для отслеживания восстановления отдельных продуктов. Обновленная информация с текущими деталями будет предоставлена к 4:00 вечера по тихоокеанскому времени. Инцидент повлиял на многочисленные продукты Google Cloud, включая API Gateway, Apigee, Cloud Data Fusion, Cloud Firestore и многие другие. Затронутые местоположения включают Йоханнесбург, несколько регионов в Азии, Европе, Австралии, Южной Америке и Соединенных Штатах. Инцидент затронул широкий спектр регионов, включая africa-south1, asia-east1, europe-central2 и us-west4, среди многих других. Затронутые регионы расположены по всему миру, с несколькими регионами в Азии, Европе и Америке. Пользователям рекомендуется продолжать следить за сервисами и восстановлением отдельных продуктов. Инцидент все еще устраняется, и пользователям будет предоставлена обновленная информация к 4:00 вечера по тихоокеанскому времени 12 июня 2025 года.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент в Google Cloud начался 12 июня 2025 года в 10:51 по времени US/Pacific. Большинство продуктов Google Cloud подтвердили полное восстановление сервиса. Однако несколько сервисов испытывают остаточное влияние, и соответствующие инженерные команды активно работают над восстановлением. Ожидается, что восстановление будет завершено менее чем за час. Обновление будет предоставлено к 15:00 PDT с текущими деталями. Инцидент затронул многочисленные продукты Google Cloud, включая API Gateway, Cloud Data Fusion, Cloud Firestore и многие другие. Затронутые локации включают Йоханнесбург, Многорегиональный: Азия, Тайвань и многие другие регионы по всему миру. Затронутые регионы охватывают Африку, Азию, Австралию, Европу, Северную и Южную Америку. Инцидент затронут несколько регионов, включая asia, eu, nam и us. Восстановительные усилия продолжаются, и обновление будет предоставлено вскоре.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент начался 12 июня 2025 года в 10:51 по времени Тихоокеанского побережья США. Были предприняты усилия по смягчению последствий в регионах us-central1 и multi-region/us, и наблюдаются признаки восстановления. Подтверждение от внутреннего мониторинга и клиентов указывает на восстановление в нескольких регионах, включая us-central1 и multi-region/us. Ожидается полное восстановление в течение часа. Обновление будет предоставлено к 14:30 по тихоокеанскому времени с текущими подробностями. Инцидент затронул множество продуктов Google Cloud, включая API Gateway, Cloud Data Fusion и Google Cloud Storage. Затронутыми местами являются Йоханнесбург, Тайвань, Токио и многие другие регионы по всему миру. Инцидент повлиял на несколько регионов, включая asia, eu, nam и us. Затронутыми регионами являются us-central1, asia-east1, europe-north1 и многие другие. Инцидент находится под пристальным вниманием, и обновления будут предоставляться как можно скорее.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент начался 12 июня 2025 года в 10:51 утра по тихоокеанскому времени. Основная причина была идентифицирована, и меры по уменьшению последствий были приняты. Инфраструктура восстановилась во всех регионах, кроме us-central1. Продукты Google Cloud, которые полагаются на затронутую инфраструктуру, наблюдают восстановление в нескольких местах. Инженеры знают о клиентах, которые все еще испытывают проблемы на us-central1 и multi-region/us, и активно работают над полным восстановлением. Нет ETA для полного восстановления. Обновление будет предоставлено к четвергу, 12 июня 2025 года, в 14:00 по тихоокеанскому времени с текущими деталями. Инцидент затронул множество, включая API Gateway, Cloud Data Fusion и Cloud Spanner, среди других. Инцидент также затронул несколько мест по всему миру, включая Йоханнесбург, Токио, Мумбаи и Сидней, среди других.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент начался 12 июня 2025 года в 10:51 по времени US/Pacific. Инженеры определили причину и применили меры, но клиенты по-прежнему испытывают различные степени влияния на отдельные продукты Google Cloud. Основная зависимость восстановилась во всех местах, кроме us-central1. Все соответствующие команды инженеров работают над восстановлением сервиса, но нет оценки времени для полного восстановления сервиса. Обновление будет предоставлено к 13:30 PDT 12 июня 2025 года с текущими деталями. Затронутые продукты включают Agent Assist, AlloyDB для PostgreSQL, Apigee и многие другие. Затронутые места включают Йоханнесбург, Многорегиональный: Азия, Тайвань и многие другие. Инцидент имеет глобальное влияние, затрагивая несколько регионов и мест. Инженеры активно заняты в восстановлении сервиса, но инцидент продолжается. Полный список затронутых продуктов и мест предоставлен в оригинальном сообщении.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент начался 12 июня 2025 года в 10:51 утра по тихоокеанскому времени США. Все расположения, кроме us-central1, полностью восстановились, а us-central1 в основном восстановился. Нет оценки времени для полного восстановления в us-central1. Обновление будет предоставлено 12 июня 2025 года в 1:00 дня по тихоокеанскому времени. Инцидент затронул несколько продуктов, включая Agent Assist, Cloud Data Fusion, Cloud Firestore и многие другие. Затронутые расположения включают Йоханнесбург, Тайвань, Гонконг, Токио и многие другие в Азии, Европе, Северной Америке и Южной Америке. Инцидент затронул несколько регионов, включая азию, европу, nam5, us и другие. Затронутые расположения в США включают Айову, Южную Каролину, Северную Вирджинию и другие. Инцидент все еще продолжается, с ожидаемым обновлением. Затронутые продукты и расположения многочисленны, и инцидент все еще решается.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Инцидент начался 12 июня 2025 года в 10:51 по времени US/Pacific. Инженеры трудятся над урегулированием проблемы, и некоторые локации уже восстановились. Однако, пока нет оценки времени. Обновление будет предоставлено к 12:45 PDT с последними деталями. Инцидент затронул несколько сервисов Google Cloud, включая Cloud Data Fusion, Cloud Memorystore и Cloud Workstations. Затронутые локации включают Йоханнесбург, Тайвань, Гонконг, Токио и многие другие в Азии, Европе, Северной Америке и Южной Америке. Инцидент глобальный, с множеством регионов, затронутых в США, Азии и других областях. Затронутые продукты включают Google Cloud Bigtable, Google Cloud Console и Identity Platform, среди других. Инцидент продолжается, и пользователи должны ожидать нарушений в затронутых сервисах до дальнейшего уведомления.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Проблема с обслуживанием началась 12 июня 2025 года в 10:51 по тихоокеанскому времени (PDT), затронувшая несколько продуктов платформы Google Cloud Platform, GCP). Инженерная команда исследует проблему, и обновление будет предоставлено к 12:15 по тихоокеанскому времени. Проблема вызывает различные уровни воздействия на запросы API. В настоящее время нет доступного обходного пути. Затронутые продукты включают Cloud Data Fusion, Cloud Memorystore, Cloud Workstations и несколько других. Проблема затрагивает несколько мест по всему миру, в том числе Йоханнесбург, Тайвань, Токио, Мумбаи и многие другие. Затронутые места включают несколько регионов в Азии, Европе, Южной Америке и Северной Америке. Дисфункция сервиса причиняет неудобство всем затронутым пользователям. Инженерная команда работает над решением проблемы как можно скорее.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

ОБНОВЛЕНИЕ: Множество продуктов GCP испытывают проблемы с обслуживанием

Проблема с сервисом началась в нескольких продуктах Google Cloud Platform (GCP) 12 июня 2025 года, в 10:51 по тихоокеанскому времени. Инженерная команда расследует инцидент и предоставит обновление к 12:15 по тихоокеанскому времени с текущими деталями. Затронутые продукты включают Google Cloud Bigtable, Google Cloud Console, Google Cloud Dataproc, Google Cloud Storage, Identity Platform и Identity and Access Management. Проблема влияет на несколько регионов, включая Йоханнесбург, Многорегиональный: Азия, Тайвань, Гонконг, Токио, Осаку, Сеул, Мумбаи, Дели, Сингапур, Джакарту и многие другие. Симптомы включают различные уровни воздействия на затронутые продукты. В настоящее время нет доступного обходного пути для этой проблемы. Инцидент вызывает нарушения для пользователей, и команда приносит извинения за неудобства. Затронутые места включают Йоханнесбург, Многорегиональный: Азия, Тайвань, Гонконг, Токио, Осаку, Сеул, Мумбаи, Дели, Сингапур, Джакарту и многие другие. Команда продолжит расследование и будет предоставлять обновления по этому вопросу.

UPDATE: Multiple GCP products are experiencing Service issues status.cloud.google.com

RSS Hunter • 12 июн. 2025 г.

РЕШЕНО: Проблема Compute Engine (GCE), повлиявшая на несколько зависимых сервисов GCP в различных зонах

19 мая 2025 года в Google Compute Engine (GCE) возникли проблемы с завершением работы Spot VM, продолжавшиеся примерно 8 часов 42 минуты. Это привело к снижению производительности и таймаутам в определенных регионах, таких как us-central1 и us-east4. Первопричиной стало изменение конфигурации, которое отключило флаг функциональности, в результате чего Spot VM застревали во время завершения работы. Это привело к образованию очереди, что повлияло на производительность всех типов VM в определенных областях. Внутренний мониторинг оповестил инженеров Google, и они инициировали откат, чтобы решить проблему. Откат, завершенный 20 мая 2025 года в 03:55 по тихоокеанскому времени США, смягчил последствия этой проблемы. Клиенты столкнулись с увеличением задержки операций плоскости управления VM, что, в частности, повлияло на создание, изменение и удаление VM. Проблема затронула различные продукты Google Cloud Platform (GCP), которые полагаются на GCE, включая GKE и Dataflow. Google принимает меры для предотвращения будущих инцидентов, включая аудит проверок безопасности и решение проблем масштабируемости. Google пересматривает свой поэтапный подход к развертыванию, чтобы предотвратить подобные сбои. Компания приносит извинения за причиненные неудобства и стремится к повышению надежности платформы.

RESOLVED: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 27 мая 2025 г.

РЕШЕНО: Проблема с Compute Engine (GCE) Google, влияющая на несколько зависимых сервисов GCP в зонах

Произошел сбой в работе с 19 мая 2025 года, 20:23 до 20 мая 2025 года, 05:05 (временная зона US/Pacific). Инцидент затронул несколько сервисов Google Cloud, включая Compute Engine, Kubernetes Engine, Cloud Dataflow, Cloud SQL и другие. Причина проблемы заключалась в недавнем изменении конфигурации, которое негативно повлияло на обработку Google Compute Engine прекращения работы виртуальных машин spot, что привело к перегрузке сервисов управления. Это вызвало нарушения создания экземпляров виртуальных машин, прекращения и резервирования потребления. Проблема была устранена путем возврата к предыдущей конфигурации, что устранило влияние на все затронутые сервисы. Клиенты испытывали повышенную задержку или таймауты в различных операциях, включая создание экземпляров виртуальных машин, а также проблемы с Cloud Dataproc, Cloud Dataflow, Cloud Build и другими сервисами. Полный отчет об инциденте будет готов в ближайшие дни. Затронутыми регионами и зонами были us-central1, us-east4 и несколько других зон в Азии, Европе, Австралии и Южной Америке. Инцидент привел к различным ошибкам, таймаутам и сбоям в различных сервисах Google Cloud.

RESOLVED: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 20 мая 2025 г.

РЕШЕНО: Проблема Compute Engine (GCE), повлиявшая на несколько зависимых сервисов GCP в различных зонах

Инцидент начался 19 мая 2025 года в 20:23 и закончился 20 мая 2025 года в 05:05 (все времена указаны в зоне US/Pacific). Проблема с множественными зависимыми сервисами GCP была решена для всех затронутых пользователей к вторнику, 20 мая 2025 года, в 05:05 по времени US/Pacific. Спасибо за ваше терпение, пока мы работали над решением проблемы. Затронутые продукты: AlloyDB для PostgreSQL, Cloud Build, Cloud Filestore, Colab Enterprise, Google App Engine, Google Cloud Composer, Google Cloud Dataflow, Google Cloud Dataproc, Google Cloud Deploy, Google Cloud SQL, Google Compute Engine, Google Kubernetes Engine, Управляемый сервис для Apache Kafka, Миграция на виртуальные машины Затронутые локации: Бельгия (europe-west1), Айова (us-central1), Южная Каролина (us-east1), Северная Вирджиния (us-east4), Орегон (us-west1)

RESOLVED: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 20 мая 2025 г.

ОБНОВЛЕНИЕ: Проблема с Google Compute Engine (GCE), влияющая на несколько зависимых сервисов GCP в различных зонах

Многосервисный инцидент, затронувший Google Cloud Platform, начался 19 мая 2025 года в 20:23 по тихоокеанскому времени США. Многие зависимые сервисы GCP испытывали проблемы, такие как повышенная задержка и сбои. Команда инженеров развернула меры по уменьшению последствий, наблюдая улучшения в пострадавших зонах. Сервисы, пострадавшие от инцидента, включали Dataproc, Compute Engine, Kubernetes Engine, Dataflow, Filestore и Cloud Build. Также пострадали Cloud SQL, Composer, AlloyDB для PostgreSQL, App Engine, Migrate to Virtual Machines, Vertex GenAI, Cloud Deploy и Memorystore для Redis. Многие из пострадавших продуктов уже были урегулированы. Клиенты испытывали проблемы с созданием экземпляров, масштабированием и задержкой операций. Рекомендовалось использовать альтернативные зоны для уменьшения последствий. Затронутыми локациями были Бельгия, Айова, Южная Каролина, Северная Вирджиния и Орегон. Дополнительная информация была запланирована для публикации 05:30 по тихоокеанскому времени США 20 мая 2025 года, а инцидент был закрыт в 05:05.

UPDATE: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 20 мая 2025 г.

ОБНОВЛЕНИЕ: Проблема с Google Compute Engine (GCE), влияющая на несколько зависимых сервисов GCP в различных зонах

Начиная с 19 мая 2025 года, 20:23 по тихоокеанскому времени США, несколько сервисов Google Cloud испытывали проблемы. Инцидент затронул Google Compute Engine, Dataflow, SQL, AlloyDB, Composer, Build, Dataproc, Filestore и App Engine Flexible. Пользователи могли столкнуться с увеличением задержки, таймаутами или сбоями при операциях, таких как создание, удаление, изменение размера или обновление экземпляров и кластеров. Проблема затронула зоны в Бельгии, Айове, Южной Каролине, Северной Вирджинии и Орегоне. Команда инженеров Google развернула меры по уменьшению последствий, и улучшения были зафиксированы во всех затронутых зонах. В качестве обходного пути клиентам было рекомендовано использовать альтернативные зоны, чтобы избежать влияния. Клиенты Cloud Build испытывали повышенную задержку при завершении сборки или спорадические сбои сборки. Пользователи Cloud SQL, столкнувшиеся с сбоями при создании, были посоветованы повторить попытку после удаления неудачных экземпляров. Пользователи Cloud Composer столкнулись с сбоями при создании сред, обновлениях и задержками в масштабировании рабочих Airflow. Обновление с дополнительной информацией было запланировано на 20 мая 2025 года, 05:00 по тихоокеанскому времени США, и инцидент был закрыт в это время.

UPDATE: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 20 мая 2025 г.

ОБНОВЛЕНИЕ: Проблема с Google Compute Engine (GCE), влияющая на несколько зависимых сервисов GCP в различных зонах

Многосервисный инцидент, затрагивающий продукты Google Cloud, начался 19 мая 2025 года в 20:23 по времени US/Pacific. Инцидент влияет на сервисы, такие как Compute Engine, Kubernetes Engine, Dataflow, SQL, AlloyDB, Composer, Build, Dataproc, Filestore и App Engine. Пользователи могут столкнуться с увеличением задержки, таймаутами или сбоями в различных операциях по этим сервисам. Инженерная команда активно работает над уменьшением без текущего срока выполнения. Затронутые операции включают создание экземпляров, изменение размера, масштабирование и обновление. Потенциальный обходной путь заключается в использовании альтернативных зон для избежания затронутых регионов. Затронутые локации - Бельгия, Айова, Южная Каролина, Северная Вирджиния и Орегон. Инцидент также влияет на оба и частные пулы в Cloud Build. Клиенты, испытывающие сбои при создании операций для Cloud SQL, могут повторить попытку после удаления неудачных экземпляров. Ожидается обновление 20 мая 2025 года в 04:30 по времени US/Pacific.

UPDATE: Google Compute Engine (GCE) issue impacting multiple dependent GCP services across zones status.cloud.google.com

RSS Hunter • 20 мая 2025 г.

РЕШЕНО: Клиенты испытывают проблемы с подключением к нескольким сервисам Google Cloud в зоне us-east5-c

29 марта 2025 года сервисы Google Cloud в зоне us-east5-c испытывали ухудшение качества обслуживания более шести часов из-за отключения электроэнергии. Основной причиной стала неисправность системы бесперебойного питания (UPS) при потере внешнего питания. Критическая неисправность батареи внутри системы UPS не позволила ей обеспечить непрерывное питание, что привело к простою виртуальных машин и потере пакетов. Инженеры Google были предупреждены и перенаправили трафик, восстановив питание через генератор после почти двух часов. Некоторые сервисы требовали ручных действий для полного восстановления, что продлило время восстановления. Google работает с поставщиком системы UPS и укрепляет восстановление питания кластера, чтобы предотвратить повторение. Пострадали сервисы AlloyDB, BigQuery, Bigtable, Composer, Dataflow, Filestore и другие, с различными уровнями нарушений. Клиенты испытывали недоступность, увеличение задержки и ошибки в зависимости от сервиса и зональных зависимостей. Инцидент затронул местоположение Колумбус (us-east5), повлияв на различные продукты, которые полагаются на пострадавшую зону. Google извинился за сбои и обязался улучшить надежность платформы.

RESOLVED: Customers are experiencing connectivity issues with multiple Google Cloud services in zone us-east5-c status.cloud.google.com

RSS Hunter • 11 апр. 2025 г.

РЕШЕНО: Клиенты испытывают проблемы с подключением к нескольким сервисам Google Cloud в зоне us-east5-c

Инцидент в Google Cloud произошел 29 марта 2025 года с 12:53 до 19:15 по времени US/Pacific, продлившись 6 часов и 19 минут. Инцидент повлиял на несколько продуктов Google Cloud в регионе us-east5-c, что привело к недоступности некоторых зональных ресурсов. Основной причиной стала отключение электроснабжения и неисправность батарей в системе бесперебойного питания (UPS). Это предотвратило переключение источника питания на генераторы, что привело к простою некоторых экземпляров Compute Engine и потере пакетов внутри зоны. Также были испытаны ограничения по емкости для Google Kubernetes Engine в других зонах us-east5. Небольшое количество Persistent Disks было недоступно во время простоя. Инженеры снизили влияние, перенаправив трафик от пострадавшего местоположения и обойдя неисправную систему UPS для восстановления питания через генератор. Инцидент был полностью смягчен к 19:12 по времени US/Pacific 29 марта 2025 года. Полный отчет об инциденте будет завершен в течение следующих дней, предоставляя подробный анализ основной причины. Зона us-east5-c с тех пор перешла обратно на основной источник питания без дальнейшего воздействия на 30 марта 2025 года в 17:30 по времени US/Pacific.

RESOLVED: Customers are experiencing connectivity issues with multiple Google Cloud services in zone us-east5-c status.cloud.google.com

RSS Hunter • 1 апр. 2025 г.

РЕШЕНО: Клиенты испытывают проблемы с подключением к нескольким сервисам Google Cloud в зоне us-east5-c

Инцидент произошел 29 марта 2025 года между 12:53 и 19:15 по времени US/Pacific. Зона us-east5-c в настоящее время стабильна и работает на альтернативном источнике питания. Все ранее затронутые продукты были устранены к 19:15 по времени US/Pacific. Однако небольшое количество Persistent Disks все еще находится в процессе восстановления и активно обрабатывается. Клиенты, испытывающие трудности с подключением Persistent Disks, должны открыть запрос на поддержку. Инженеры мониторят стабильность сервиса перед переходом на основной источник питания. Обновления будут предоставляться через PSH к воскресенью, 30 марта 2025 года, в 01:30 по времени US/Pacific. Инцидент затронул несколько продуктов, включая AlloyDB для PostgreSQL, Cloud Firestore и Google Compute Engine, среди прочих. Затронутым местом была Колумбус (us-east5). Компания приносит извинения тем, кто пострадал от сбоев.

RESOLVED: Customers are experiencing connectivity issues with multiple Google Cloud services in zone us-east5-c status.cloud.google.com

RSS Hunter • 30 мар. 2025 г.

ОБНОВЛЕНИЕ: Клиенты испытывают проблемы с подключением к нескольким сервисам Google Cloud в зоне us-east5-c

Инцидент начался 29 марта 2025 года в 12:53 и завершился 29 марта 2025 года в 19:15 (все время указано по тихоокеанскому времени США). Наши инженеры активно работают над восстановлением после события с питанием в пострадавшей зоне. Полное восстановление в настоящее время ожидается в течение нескольких часов. Пострадавшие сервисы включают Cloud Interconnect, Virtual Private Cloud (VPC), Google Compute Engine, Persistent Disk, AlloyDB, Cloud Dataproc, Cloud Dataflow, Cloud Filestore, Identity and Access Management, Cloud SQL, Google Kubernetes Engine, Cloud Composer, BigQuery, Cloud Bigtable и другие. Мы определили, что другие зоны (a, b) в регионе us-east5 не пострадали. Мы предоставим обновление в субботу, 29 марта 2025 года, в 20:00 по тихоокеанскому времени США с текущими подробностями. Мы приносим извинения всем, кто пострадал от сбоев. Пострадавшие продукты: Google Compute Engine Пострадавшие местоположения: Колумбус (us-east5)

UPDATE: Customers are experiencing connectivity issues with multiple Google Cloud services in zone us-east5-c status.cloud.google.com

RSS Hunter • 30 мар. 2025 г.

РЕШЕНО: Клиенты Apigee могут столкнуться с невозможностью входа в портал административного интерфейса.

Произошел инцидент 4 марта 2025 года, начавшийся в 12:04 по тихоокеанскому времени США и завершившийся в 13:40 по тихоокеанскому времени США. Эта проблема затронула Apigee Hybrid, Apigee Edge Public Cloud и Apigee, и была решена для всех пользователей к 13:30 по тихоокеанскому времени США. Предварительный анализ предполагает, что корневой причиной проблемы была истекшая сертификация. Затронутые продукты включали Apigee, Apigee Edge Public Cloud и Apigee Hybrid. Эта проблема повлияла на различные местоположения по всему миру, включая несколько городов в Азии, Австралии, Европе, Северной и Южной Америке. Затронутые местоположения в Азии включали Тайвань, Гонконг, Токио, Осаку, Сеул, Мумбаи, Дели, Сингапур, Джакарту и другие. В Европе затронутыми местоположениями были Варшава, Финляндия, Мадрид, Бельгия и несколько других городов. Эта проблема также повлияла на местоположения в Северной Америке, включая Монреаль, Торонто, Мексику и несколько городов в Соединенных Штатах. Решение этой проблемы было завершено к 13:30 по тихоокеанскому времени США, и пользователи теперь могут получить доступ к затронутым продуктам без каких-либо проблем. Компания поблагодарила пользователей за их терпение, пока проблема была решена, и инцидент был полностью устранен.

RESOLVED: Apigee customers may experience unable to login to Admin UI portal. status.cloud.google.com

RSS Hunter • 4 мар. 2025 г.

ОБНОВЛЕНИЕ: Клиенты Apigee могут столкнуться с невозможностью входа в портал административного интерфейса.

Произошел инцидент 04 марта 2025 года, начавшийся в 12:04 и завершившийся в 13:40 по времени US/Pacific, который повлиял на клиентов Apigee, которые не смогли авторизоваться в портал администратора Admin UI. Проблема началась ранее, в 01:25 по времени US/Pacific, и инженерная команда занималась расследованием причины. Команда планировала предоставить обновление к 14:15 по времени US/Pacific с последними подробностями. Нарушение затронуло различные места по всему миру, включая несколько городов в Азии, Европе, Северной и Южной Америке. Подвергшиеся воздействию продукты включали Apigee, Apigee Edge Public Cloud и Apigee Hybrid. Проблема была связана конкретно с Portals Admin UI, который не смог авторизоваться в порталы. На момент отчета не было доступного обходного решения для этой проблемы. Подвергшиеся воздействию места были широко распространены, охватывая множество городов в разных регионах. Инцидент вызвал неудобства для всех, кто был затронут нарушением, и была издана извинение тем, кто пострадал. Расследование и обновление инженерной команды должны были предоставить дальнейшее разъяснение проблемы и ее решения.

UPDATE: Apigee customers may experience unable to login to Admin UI portal. status.cloud.google.com

RSS Hunter • 4 мар. 2025 г.

РЕШЕНО: Запросы клиентов Cloud Asset Inventory могут не возвращать результат

Инцидент начался 19 февраля 2025 года в 01:14 и завершился 19 февраля 2025 года в 23:56 (все время указано по времени US/Pacific). Проблема с Cloud Asset Inventory была решена для всех пострадавших пользователей к среде, 19 февраля 2025 года, 23:20 по времени US/Pacific. Мы благодарим вас за терпение, пока мы работали над решением проблемы. Пострадавшие продукты: Cloud Asset Inventory Пострадавшие местоположения: Глобально

RESOLVED: Cloud Asset Inventory customers' queries may not return result status.cloud.google.com

RSS Hunter • 20 февр. 2025 г.

ОБНОВЛЕНИЕ: Запросы клиентов инвентаризации облачных активов могут не возвращать результат

Инцидент начался 19 февраля 2025 года в 01:14 и завершился 19 февраля 2025 года в 23:56 (все время указано по времени US/Pacific). Резюме: Запросы клиентов Cloud Asset Inventory могут не возвращать результатов. Описание: В настоящее время наша инженерная команда проводит работы по смягчению последствий. На данный момент у нас нет срока завершения работ по смягчению. Мы предоставим более подробную информацию к четвергу, 20 февраля 2025 года, 03:00 по времени US/Pacific. Диагноз: Клиенты Cloud Asset Inventory, пострадавшие от этой проблемы, могут увидеть пустой результат от своих запросов QueryAssets. Временное решение: На данный момент не доступно. Пострадавшие продукты: Cloud Asset Inventory Пострадавшие регионы: Глобально

UPDATE: Cloud Asset Inventory customers' queries may not return result status.cloud.google.com

RSS Hunter • 20 февр. 2025 г.

ОБНОВЛЕНИЕ: Запросы клиентов Cloud Asset Inventory могут не возвращать результат

Инцидент начался 19 февраля 2025 года в 01:14 (все время указано по тихоокеанскому времени США). Краткое описание: Запросы клиентов сервиса Cloud Asset Inventory могут не возвращать результаты. Описание: Наша инженерная команда в настоящее время работает над устранением проблемы. Пока нет оценки времени устранения неполадки. Мы предоставим дополнительную информацию к 22:00 19 февраля 2025 года по тихоокеанскому времени США. Диагностика: Клиенты Cloud Asset Inventory, затронутые этой проблемой, могут видеть пустые результаты своих запросов QueryAssets. Обходной путь: В настоящее время отсутствует. Затронутые продукты: Cloud Asset Inventory Затронутые регионы: Глобально

UPDATE: Cloud Asset Inventory customers' queries may not return result status.cloud.google.com

RSS Hunter • 19 февр. 2025 г.

ОБНОВЛЕНИЕ: Запросы клиентов Cloud Asset Inventory могут не возвращать результат

Инцидент начался 19 февраля 2025 года в 01:14 (все время указано по тихоокеанскому времени США). Краткое описание: Запросы клиентов Cloud Asset Inventory могут не возвращать результаты. Описание: В настоящее время наша инженерная команда проводит работы по устранению проблемы. На данный момент у нас нет срока устранения проблемы. Мы предоставим дополнительную информацию к среде, 19 февраля 2025 года, 14:30 по тихоокеанскому времени США. Диагноз: Клиенты Cloud Asset Inventory, пострадавшие от этой проблемы, могут видеть пустые результаты своих запросов QueryAssets. Временное решение: На данный момент нет. Пострадавшие продукты: Cloud Asset Inventory Пострадавшие регионы: Глобально

UPDATE: Cloud Asset Inventory customers' queries may not return result status.cloud.google.com

RSS Hunter • 19 февр. 2025 г.

ОБНОВЛЕНИЕ: Запросы клиентов Cloud Asset Inventory могут не возвращать результат

Инцидент начался 2025-02-19 01:14 (все время указано по тихоокеанскому времени США). Резюме: Запросы клиентов Cloud Asset Inventory могут не возвращать результаты. Описание: Мы столкнулись с проблемой в Cloud Asset Inventory, начиная с среды, 2025-02-19 01:14 по тихоокеанскому времени США. Наша инженерная команда продолжает расследовать проблему. Мы предоставим обновление к среде, 2025-02-19 12:00 по тихоокеанскому времени США с текущими подробностями. Мы приносим извинения всем, кто пострадал от сбоев. Диагноз: Клиенты Cloud Asset Inventory, пострадавшие от этой проблемы, могут увидеть пустой результат от своих запросов QueryAssets. Временное решение: На данный момент не доступно. Пострадавшие продукты: Cloud Asset Inventory Пострадавшие местоположения: Глобально

UPDATE: Cloud Asset Inventory customers' queries may not return result status.cloud.google.com

RSS Hunter • 19 февр. 2025 г.

РЕШЕНО: Панели мониторинга SIEM и расширенные панели мониторинга SOAR для Google Security Operations (SecOps) были недоступны.

18 февраля 2025 года, с 2:42 до 6:40 вечера по тихоокеанскому стандартному времени, Chronicle Security и Chronicle SOAR испытывали проблему, которая не позволяла пользователям доступ к панелям мониторинга, отображая ошибку «Произошла ошибка при загрузке панелей». Выпадение системы длилось 3 часа и 58 минут, затронув глобальных клиентов. Причина была обнаружена в отзыве связанных внутренних лицензий Looker, которые были впоследствии восстановлены для решения проблемы. Подверглись воздействию продукты Chronicle SOAR и Chronicle Security, а затронутые локации включали Токио, Мумбаи, Сингапур, Сидней, Европу, Бельгию, Турин, Лондон, Франкфурт, Нидерланды, Цюрих, Париж, Доху, Даммам, Тель-Авив, Торонто, Сан-Паулу, Айову и Южную Каролину.

RESOLVED: SIEM Dashboards and SOAR Advanced Dashboards for Google Security Operations (SecOps) were unavailable. status.cloud.google.com

RSS Hunter • 19 февр. 2025 г.

РЕШЕНО: Панели мониторинга SIEM и расширенные панели мониторинга SOAR для операций безопасности Google (SecOps) были недоступны.

Инцидент начался 18 февраля 2025 года в 14:42 и завершился 18 февраля 2025 года в 18:41 (все время указано по тихоокеанскому времени США). Проблема с Chronicle Security, Chronicle SOAR была решена для всех пострадавших пользователей к вторнику, 18 февраля 2025 года, 18:35 по тихоокеанскому времени США. Мы благодарим вас за терпение, пока мы работали над решением проблемы. Пострадавшие продукты: Chronicle SOAR, Chronicle Security Пострадавшие локации: Токио (asia-northeast1), Мумбаи (asia-south1), Сингапур (asia-southeast1), Сидней (australia-southeast1), Мульти-регион: Европа, Бельгия (europe-west1), Турин (europe-west12), Лондон (europe-west2), Франкфурт (europe-west3), Нидерланды (europe-west4), Цюрих (europe-west6), Париж (europe-west9), Доха (me-central1), Даммам (me-central2), Тель-Авив (me-west1), Торонто (northamerica-northeast2), Сан-Паулу (southamerica-east1), Мульти-регион: США, Айова (us-central1), Южная Каролина (us-east1)

RESOLVED: SIEM Dashboards and SOAR Advanced Dashboards for Google Security Operations (SecOps) were unavailable. status.cloud.google.com

RSS Hunter • 19 февр. 2025 г.