Почему важна динамика
Цифра «в индексе 12 400 страниц» сама по себе ничего не объясняет: хорошо это или плохо, зависит от того, сколько страниц должно быть. Настоящую информацию даёт изменение: растёт ли число, замирает или падает, и в каких разделах. Такое наблюдение позволяет заметить проблему за недели до просадки трафика.
Что фиксировать
| Показатель | Где брать | Как часто |
|---|---|---|
| Число страниц в поиске | Панели вебмастеров | Раз в неделю |
| Число страниц, отправленных в карте сайта, и проиндексированных из них | Отчёт по карте сайта | Раз в неделю |
| Исключённые страницы и причины исключения | Отчёты об индексировании | Раз в две недели |
| Количество обращений робота | Статистика обхода и журнал сервера | Раз в неделю |
| Число новых страниц на сайте | Собственная выгрузка из системы | Раз в неделю |
Разбейте карту сайта по разделам
Общий показатель скрывает, где именно проблема. Простой приём: сделайте отдельный файл карты для каждого раздела — каталог, карточки, блог, услуги — и объедините их индексным файлом. Тогда панель вебмастера покажет долю проиндексированных страниц для каждого раздела отдельно. Как устроен такой файл — в статье про индексный файл для крупных проектов.
Как читать динамику
| Что видно | Возможное объяснение | Что проверить |
|---|---|---|
| Плавный рост числа страниц | Появляются новые страницы, робот их находит | Соответствует ли рост числу опубликованных страниц |
| Резкое падение по одному разделу | Техническая ошибка, закрытие от индексации, дубли | Файл robots.txt, мета-теги, коды ответа раздела |
| Отправлено много, проиндексировано мало | Слабый контент, дубли, низкая скорость обхода | Причины исключения в отчёте |
| Число страниц растёт быстрее, чем содержимое | Появились технические дубли и параметры | Адреса с параметрами и сортировкой |
Что делать при просадке
- Определите, какой раздел пострадал, и когда началось снижение.
- Сопоставьте дату с событиями: выкладкой, изменением файла robots.txt, переездом.
- Проверьте коды ответа и доступность страниц раздела: как настроить мониторинг доступности.
- Пройдите по списку причин: чек-лист диагностики проблем с индексацией.
Не путайте индексацию и обход. Робот может обходить страницы, но не добавлять их в поиск: разница — в статье про индексацию и обход. Про причины отсутствия страниц в поиске — в материале про девять причин.
Частые вопросы
Как часто проверять индексацию?
Показатели числа страниц достаточно фиксировать раз в неделю; подробные причины исключения — раз в две недели или после крупных изменений сайта.
Зачем делить карту сайта на несколько файлов?
Панель вебмастера показывает статистику по каждому файлу, поэтому по разделам видно, где именно страницы не попадают в поиск.
Что означает резкое падение числа страниц в индексе?
Чаще всего техническую проблему: закрытие от индексации, ошибки сервера, массовые дубли; нужно сопоставить дату падения с выкладками.
Готовый адрес можно собрать прямо сейчас: откройте генератор ЧПУ — он транслитерирует фразу по таблице Яндекса, уберёт служебные слова и покажет длину адреса.