Forums / National / Russian / Тех. поддержка / Вопрос о файле robots.txt

Herzog Zwei
#41463 2016-03-05 06:05

Сегодня обнаружил в гугле ссылку на страницу http://nebuzi.ru/?questionsd=1

Как запретить индексацию вопросов в плагине news на главной странице чтобы избежать дублирования? 
Нужно чтобы индексировались только сами страницы вопросов.
А также запретить индексацию Новостей в плагине news на главной.

Сайт: nebuzi.ru

Добавлено 58 минут спустя:

С первым разобрался вроде Disallow: /?questionsd  все вопросы на страницах 2,3,4,5 и тд запрещаются к индексации, а на самих страницах вопроса нет. Проверял через яндекс вебмастер.
Вот на 1-й не знаю скрываются или нет, так как это главная страница сайта nebuzi.ru, да и пусть все равно там будут добавляться новые вопросы тем самым смещая вопросы в 2,3,4,5 и тд.

Также закрыл от робота такие страници как /auto , с помощью Disallow: /auto$
$ в конце не дает запретить индексировать сами  страницы и вопросы в подкатегориях

А вот с новостяси на главной в плагине NEWS пока не знаю что делать. Если кто знает напишите.

This post was edited by Herzog Zwei (2016-03-05 12:01, 9 years ago)