При переносе сайта на новый хостинг, обновлении Magento, или при обслуживании сайта, когда возможны большие задержки в работе сайта — рекомендуется возвращать ошибку 503.
503(Service Temporarily Unavailable, сервис временно недоступен) — режим обслуживания. Как известно Google «не любит» такие ошибки.
Для того чтобы избежать проблем с Google, рекомендуется задавать параметр — Retry-After в секундах []. При параметре Retry-After, Google проверит страницу через время которое указали.
Кстати, Google будет очень активно сканировать сайт после истечения Retry-After. Следует позаботиться о корректной работе сайта, и возможно выставить Retry-After — с большим значением.