Ключевое структурное отличие сайта услуг от интернет-магазина
У типичного сайта услуг заметно меньше динамически формируемых технических страниц — обычно отсутствуют корзина, сравнение и сложная система фильтров каталога, — вместо этого основное содержимое сосредоточено вокруг относительно небольшого набора статичных страниц услуг, портфолио и информационных материалов, что упрощает и сам файл robots.txt.
User-agent: *
Disallow: /wp-admin/
Disallow: /feedback-thanks/
Disallow: /*?utm_
Disallow: /search/
Sitemap: https://example.ru/sitemap.xml
Страницы благодарности после отправки заявки или формы обратной связи
Страница, показываемая пользователю сразу после успешной отправки формы заявки или обратной связи, обычно не несёт самостоятельной содержательной ценности для стороннего посетителя из поиска и к тому же способна создать путаницу, если случайно окажется в выдаче раньше самой формы, поэтому её разумно закрывать от индексации.
Административные разделы используемой системы управления сайтом
Панель администрирования CMS, через которую редактируется содержимое сайта услуг, всегда должна быть закрыта от индексации — помимо отсутствия содержательной ценности, случайная индексация подобных разделов способна создать и репутационные, и связанные с безопасностью риски для сайта в целом.
Портфолио и кейсы — раздел, который почти всегда стоит держать полностью открытым
В отличие от служебных технических страниц, портфолио выполненных работ и подробные кейсы обычно представляют значительную содержательную и коммерческую ценность именно для внешнего поискового трафика, поэтому такой раздел практически всегда стоит оставлять полностью доступным для индексации без каких-либо технических ограничений.
Обязательное указание актуального sitemap.xml даже для небольшого сайта
Даже для сайта услуг с относительно небольшим числом страниц указание файла sitemap.xml в robots.txt остаётся хорошей практикой, облегчающей роботу полное и своевременное обнаружение всех значимых страниц сайта без риска пропустить какую-либо из них.
Особый случай сайта с отдельными страницами под разные города присутствия
Если сайт услуг работает сразу в нескольких городах и создаёт под каждый регион отдельную посадочную страницу, такие страницы обычно стоит оставлять полностью открытыми для индексации, поскольку они представляют самостоятельную ценность для локального поиска, — в отличие от чисто технических вариаций одного и того же содержимого без реальной географической специфики.
Интерактивные калькуляторы расчёта примерной стоимости услуги
Страница с интерактивным калькулятором расчёта стоимости, где итоговый результат формируется динамически без изменения самого адреса страницы, обычно не создаёт технических проблем для индексации, а вот отдельные технические адреса, генерируемые при отправке параметров такого калькулятора через форму, разумно закрывать от обхода как чисто служебные.
Раздел с отзывами клиентов о качестве оказанных услуг
Раздел отзывов клиентов, как и в случае с интернет-магазином, обычно стоит оставлять открытым для индексации, поскольку такой контент не только полезен потенциальным клиентам, но и представляет собой ценные уникальные текстовые материалы, регулярно пополняющие содержательное наполнение сайта услуг.
Блог и информационные материалы как отдельный, требующий внимания раздел
Для сайта услуг блог нередко становится основным источником органического поискового трафика, поэтому важно убедиться, что технические настройки robots.txt не создают случайных препятствий для полноценной индексации этого раздела, уделяя основное внимание закрытию именно служебной, а не содержательной части сайта.
Особый случай интеграции сайта с системой онлайн-бронирования или CRM
Если сайт услуг интегрирован с внешней системой онлайн-записи или бронирования, технические адреса, обслуживающие эту интеграцию — виджеты, формы передачи данных, — стоит закрывать от индексации по тем же принципам, что и остальную служебную функциональность, не имеющую самостоятельной содержательной ценности.
Страницы с сертификатами, лицензиями и подтверждениями квалификации
Страницы, демонстрирующие профессиональные сертификаты, лицензии или иные подтверждения квалификации компании, обычно стоит оставлять открытыми для индексации, поскольку такой контент способен положительно влиять на доверие потенциальных клиентов, встречающих сайт впервые именно через поисковую выдачу.
Частые вопросы
Нужен ли отдельный, сложный robots.txt для небольшого сайта услуг?
Нет, для небольшого сайта услуг обычно достаточно компактного файла с минимальным набором правил, закрывающих лишь действительно служебные технические разделы вроде административной панели.
Стоит ли закрывать страницы отдельных услуг от индексации?
Нет, страницы конкретных услуг — основная содержательная ценность подобного сайта с точки зрения привлечения поискового трафика, и их закрытие лишило бы сайт смысла его существования в поиске.
Как быть, если сайт услуг всё же использует систему фильтров?
В таком случае стоит применить те же принципы, что и для интернет-магазина, — избирательно открывать для индексации только действительно востребованные комбинации фильтров.
Готовый адрес можно собрать прямо сейчас: откройте генератор ЧПУ — он транслитерирует фразу по таблице Яндекса, уберёт служебные слова и покажет длину адреса.