@Owl1981

Как закрыть часть url от индексации в robots?

Здравствуйте!
Необходимо закрыть часть URL.
Пример:
site.ru/повторяющееся слово_какое-то слово1.html
site.ru/повторяющееся слово_какое-то слово2.html
site.ru/повторяющееся слово_какое-то слово3.html
и т.д. ...
Необходимо, чтобы от индексирования закрывалось расширение .html только при условии, что в URL есть "повторяющееся слово_какое-то слово". В остальных случаях расширение .html должно остаться.
Огромная просьба помочь советом. Сам не программист, уже голову поломал))))
  • Вопрос задан
  • 1109 просмотров
Решения вопроса 1
igorux
@igorux
Если я правильно понял ваше условие, то:
Disallow: /*повторяющееся слово*.html$

Использование спецсимволов * и $

Используйте инструменты проверки доступности документов для индексации в вебмастерских консолях поисковиков. После правки robots проверяйте, разрешено ли к индексации то, что вы хотели разрешить и т. д.
Ответ написан
Пригласить эксперта
Ответы на вопрос 2
alone_lion1987
@alone_lion1987
Веб-разработчик
Значение пути используется для определения того, должно ли правило применяться к конкретному URL на сайте. За исключением подстановочных знаков путь должен совпадать с началом любого действующего и подходящего URL. Не 7-битные символы ASCII в пути могут быть добавлены как символы UTF-8 или как экранированные значения в кодировке UTF-8

Google, Bing, Yahoo и Ask поддерживают определенные подстановочные знаки для значений путей. Вот их полный список:

  • * обозначает 0 или более экземпляров любого действительного символа.

  • $ обозначает конец URL.


Поэтому такое условие едва ли получится составить, только прописать вручную если все возможные ссылки на сайте, ну или использовать эти два постановочных знака, для задания простого условия.
Ответ написан
Комментировать
@Owl1981 Автор вопроса
Здравствуйте!
Продолжаю свое образование :) Сейчас столкнулся с проблемой запрета индексации в robots диапазона URL, начинающегося с заглавных букв. Перерыл весь интернет. С цифрами нашел. А с буквами нет.
Можно ли указать запрет директорий с диапазоном заглавных букв A-Z после niviuk_ ?
С уважением, Александр.
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы