Почему автоматическая индексация в Google остановилась после переезда сайта
Представим, что вы перенесли сайт на новый хостинг или домен. Всё настроили, проверили: сайт работает, страницы открываются, заказы поступают. Но спустя несколько дней или недель замечаете странное: трафик из Google падает, а новые страницы не появляются в поисковой выдаче. Паника? Давайте разберёмся спокойно.
Прекращение индексации в Google после переезда — не редкость. Причины могут быть как техническими, так и связанными с настройками сайта или сервера. Если проблему оставить без внимания, сайт может потерять позиции в поисковой выдаче и, как следствие, клиентов. В этой статье мы разберём основные причины остановки индексации, методы их диагностики и шаги для исправления ситуации.
Проверяем основные причины остановки индексации
1. Файл robots.txt запрещает индексацию
После переезда файл robots.txt мог измениться. Это файл, который говорит поисковым роботам, какие страницы они могут или не могут индексировать.
Как понять, что проблема в robots.txt:
- Проверьте файл по адресу: вашдомен/robots.txt.
- Ищите строку с Disallow: / — она полностью закрывает доступ для поисковых систем.
Что делать:
Если в файле есть строки, запрещающие индексацию, исправьте их. Например:
User-agent: *
Disallow:
Затем проверьте файл в Google Search Console: раздел «Инструменты и настройки > Файлы robots.txt».
2. Ошибки с перенаправлением (редиректами)
Если вы меняли URL (например, переезжали на другой домен), важно настроить редиректы — автоматические переходы со старых адресов на новые. Без этого Google может не понимать, куда делись старые страницы.
Как проверить редиректы:
- Используйте утилиты вроде Screaming Frog, чтобы отследить, не ведут ли старые ссылки на ошибку 404.
- Вручную проверьте несколько ключевых страниц: например, главную, важные категории, популярные товары.
Что делать:
Настройте редиректы через .htaccess, nginx-конфигурацию или CMS. Используйте статус 301 — он сообщает поисковым системам, что страница переместилась на постоянной основе.
3. Отсутствие или неработающий XML-карта сайта (sitemap)
Sitemap — это файл с перечнем всех страниц сайта, которые вы хотите проиндексировать. После переезда его ссылка могла измениться или вовсе пропасть из Google Search Console.
Как проверить проблему:
- Откройте раздел «Карты сайтов» в Google Search Console.
- Убедитесь, что текущая карта доступна и обновлена.
Что делать:
Если карты нет, создайте её с помощью встроенного инструмента CMS или плагина (например, для WordPress). Добавьте новую ссылку на sitemap в Google Search Console.
Технические проблемы на уровне хостинга
1. Проблемы с DNS-настройками или перенаправлением домена
Если DNS-записи для домена указаны неверно (например, в них указаны старые данные), Google может не находить ваш сайт. Типичные признаки — медленная работа сайта или его недоступность из некоторых регионов.
Что делать:
- Проверьте настройки DNS у регистратора домена или хостинг-провайдера. Актуальные записи должны вести на IP вашего нового сервера.
- Тестируйте доступность сайта с разных устройств и регионов через онлайн-сервисы вроде Pingdom или Gtmetrix.
2. Скорость и стабильность сервера
Если новый хостинг работает нестабильно — например, сервер периодически «падает» или перегружен, поисковые роботы могут отказаться индексировать сайт. Google выделяет лимит времени (crawl budget) на сканирование вашего ресурса. Если время заканчивается из-за медленных или недоступных страниц, некоторые из них просто не индексируются.
Как проверить:
- В Google Search Console есть раздел «Статистика сканирования». Обратите внимание на частоту сканирования и ошибки.
- Проверяйте серверную нагрузку с помощью панели управления хостингом или через команды на сервере (например, top, если это VPS).
Что делать:
Улучшить производительность — оптимизировать базу данных, сократить использование ресурсов. Если проблема в хостинге и вы на виртуальном тарифе, подумайте о переходе на VPS от Beget.
3. SSL-сертификат не установлен или работает некорректно
Google внимательно относится к безопасности. Отсутствие SSL (протокола HTTPS) делает сайт уязвимым, что может повлиять на индексацию.
Как проверить:
Попробуйте открыть сайт с https://. Если выдаёт ошибку, SSL либо не установлен, либо настроен неправильно.
Что делать:
Убедитесь, что SSL-сертификат установлен и корректно обновляется. В Google Search Console проверьте, настроены ли зеркала домена (с HTTPS и без).
Дополнительные нюансы: что проверить
1. Наказание со стороны Google за дублирование контента
Если старая версия сайта ещё доступна (например, по IP или старому домену), это может рассматриваться как дублирование контента.
Что делать:
Закройте доступ к старому сайту через robots.txt или настройте 301-редирект.
2. Удалённые или закрытые страницы
Возможно, после переезда часть страниц была случайно удалена или закрыта. Например, отключены разделы каталога или забыты настройки видимости.
Что делать:
Проверьте список страниц, которые были закрыты для индексации. Используйте Screaming Frog или смотрите статистику в Google Search Console.
На что смотреть при выборе хостинга для успешного индексирования
Если вы ещё выбираете хостинг или планируете новый переезд, обратите внимание на:
- Скорость серверов: протестируйте загрузку сайта через инструменты вроде PageSpeed Insights.
- Доступность SSH/FTP для настройки сайта.
- Гарантированное время работы (uptime): желательно не менее 99,9 %.
- Поддержка современных технологий: PHP 8.x, HTTP/2, наличие автоподдержки SSL.
- Резервное копирование: убедитесь, что хостинг регулярно делает бэкапы и позволяет восстановить данные.
Итоги и что делать дальше
Если индексация после переезда остановилась, причина, скорее всего, техническая: от ошибок в редиректах до проблем на уровне сервера. Проверьте ключевые настройки сайта, изучите статистику в Google Search Console и убедитесь, что новый хостинг соответствует требованиям.
Пока устраняете проблему, полезно вручную отправлять обновлённые страницы в Google через Search Console. Это поможет ускорить процесс переиндексации. А в следующий раз перед переносом сайта составьте полный чек-лист: не упустите важных деталей.
Если вам ещё предстоит выбор хостинга, рекомендую обратить внимание на виртуальный хостинг Beget. SSD-диски, бесплатный SSL Let’s Encrypt и отличная скорость загрузки позволят вашему сайту быть на высоте.
Разбираем AI и автоматизацию бизнеса в
Telegram-канале ProDelo —
свежие новости каждый день. Вопросы можно задать в
общем чате.
Видео по OpenCart, автоматизации и AI:
YouTube,
Яндекс Дзен,
ВКонтакте.
