При переносе сайта на новый хостинг, обновлении Magento, или при обслуживании сайта, когда возможны большие задержки в работе сайта – рекомендуется возвращать ошибку 503.
503 (Service Temporarily Unavailable, сервис временно недоступен) – режим обслуживания.
Как известно Google “не любит” такие ошибки.
Для того чтобы избежать проблем с Google, когда идет отладка веб-сайта – рекомендуется отдавать сервисную ошибку 503 и задавать параметр – Retry-After в секундах https://webmasters.googleblog.com/2011/01/how-to-deal-with-planned-site-downtime.html.
При коде ответа сервера 503 и параметре Retry-After, Google проверит страницу через время которое указали. И теоретически не будет проблем с индексированием в Google.
Кстати, Google будет очень активно сканировать сайт после истечения Retry-After.
Следует позаботиться о корректной работе сайта,
и возможно выставить Retry-After – с большим значением.
Добавить следующий код в index.php