Как убедить Google проиндексировать много станиц за короткое время

Главная / Полезное / Как убедить Google проиндексировать много станиц за короткое время
Как убедить Google проиндексировать много станиц за короткое время - Granat Agency - Интернет маркетинг

Заставить Гугл проиндексировать большой объем страниц за небольшой временной промежуток – невозможно. Проблема в краулинговом бюджете, но у крупных сайтов он обычно достаточный и Гугл постепенно индексирует ресурс.

Потому сначала нужно посмотреть нужно ли увеличивать краулинговый бюджет и куда он тратится. Для этого нужно исследовать логи сайта. Необходимо проверить как формируется динамический Sitemap. Для этого меняют карту сайта имеющуюся на динамическую, она будет содержать все страницы, а не только те, что требуют индексации. Когда Гуглбот и Гуглбот-Мобайл заходит на станицы сайта это записывается в логи, а потом удаляется с динамической карты, после идет загрузка новых страниц.

Проверьте настройку 304-ответа. Дело в том, что сервер должен работать следующим образом, чтобы отдавать 304 ответ, если в страницу не вносились изменения.

Создание блоков динамического типа, где рандомно выкладываются ссылки на страницы, на которые бот от Гугла еще не заходил тоже важно.

На размер краулиногового бюджета влияет и скорость загрузки сайта – чем она выше, тем лучше. Если ее вывести на максимальный уровень, то сайт начнет индексироваться куда как лучше.

Иногда можно использовать скрипт, который за сутки может отправить на индексацию по 100-200 страницы. Но, при больших объемах он будет не очень эффективен.