Как ускорить индексацию сайта
Индексация сайта — это процесс сканирования и обработки информации сайта поисковыми ботами с последующим добавлением полученной информации в индекс. При вводе поискового запроса, бот не ищет ответ на просторах интернета, а обращается к своему поисковому индексу. Это база, где хранится информация о всех известных ему проиндексированных страницах. Соответственно, поисковую выдачу будут формировать только те страницы, которые находятся в этом индексе. Поэтому если вы хотите, чтобы ваш сайт был виден пользователям, первое, что нужно сделать — это занять свое место в поисковом индексе.
Для этого есть сервисы индексации сайтов такие, как Google и Yandex, где вы просто добавляете карту сайта, чтобы поисковый бот мог просканировать ее и добавить в индекс.
Проверка индексации сайта
Анализ индексации всего сайта проводится в два подхода:
- Определение фактического количества страниц сайта. Для этого можно воспользоваться краулерами — специальными программами, которые позволяют провести SEO-аудит сайта и, в частности, узнать количество страниц сайта. Это, например, Screaming Frog или Site Analyzer.
- Сравнение фактического количества страниц с количеством страниц, найденных в индексе. Для этого используйте отчет “Покрытие” в инструменте Google Search Console. Подробнее читайте об этом в моей предыдущей статье.
Эти два набора данных должны примерно совпадать. В противном случае, если в индексе значительно меньше страниц, возможно, ваш сайт попал под фильтр. Если страниц, наоборот, значительно больше — проверьте, не обзавелись ли вы дублями.
Некоторые предпочитают использовать расширение для браузера RDS Bar, которое тоже показывает сколько страниц найдено в индексе.
Кроме этого, проверить индексацию страниц сайта можно точечно. Для этого введите в Google Search Console в поле «Проверка URL на ресурсе» url конкретной страницы или в поисковой строке формулу: site:»url проверяемой страницы».
Если результаты любого из этих способов анализа не отвечают вашим ожиданиям, и сайт плохо индексируется, то переходим к следующему этапу.
Ускорение индексации сайта
В целом, высокая индексация сайта в поисковых системах — это комплекс мер, направленный на улучшение качества сайта. А Google, как известно, любит только качественные сайты, поэтому выделяется несколько ключевых моментов:
- если вы еще не создали карту sitemap.xml, создайте и введите ее адрес в инструменте Search Console. Именно так вы отправите карту на индексацию, укажете боту, что и когда надо сканировать и где это найти на вашем сайте. Не забудьте указать ссылку на карту в файле robots.txt как еще одно указание боту, где находится ваша карта. Не надейтесь — сам бот не станет ее разыскивать, поэтому забота о том, чтобы он ее нашел ложится на ваши плечи.
- правильно составьте файл robots.txt, где указано какие страницы доступны для индексации, а какие закрыты.
- проверьте сайт на наличие дублей, чтобы бот не тратил время на обход лишних страниц, а быстрее проиндексировал целевые.
- уникализируйте текстовый контент, делайте его полезным для пользователя и наполните ключами, так как при сканировании содержимого страниц, бот сверяется с теми данными, которые уже есть в индексе, и если ваш контент посчитают не уникальным, то такие страницы могут вовсе не попасть в индекс.
- бот перемещается по ссылкам, которые выстраиваются в очередь на обход. Найдя ссылку на уже присутствующую в индексе страницу, бот поднимает такую страницу в очереди на переобход. Соответственно, размещение внешних ссылок на ваш ресурс — это еще один способ ускорения индексации.
- приведя таким образом бота на свой сайт, не упускайте возможность отправить его и на другие страницы вашего ресурса, а для этого используйте внутреннюю перелинковку страниц.
- поработайте над юзабилити сайта и посмотрите, насколько он удобен для пользователей. Это важно, поскольку сайты с удобной навигацией, вложенностью страниц в 3 клика показывают лучшие поведенческие факторы, и поисковый бот отдаст предпочтение таким страницам в очереди на индексацию.
Вместо выводов
Используя эти советы, можно постараться самостоятельно ускорить индексацию сайта в поисковых системах или доверить этот процесс нашей команде специалистов.
