Стоит ли закрывать в robots.txt эти страницы CMS

[krashman]

Стоит ли закрывать в robots.txt эти страницы CMS:

/downloads
/simplecheckout
/simpleregister
/forgot-password
/login
/wishlist
/sitemap
/compare-products
/cart
/newsletter
/request-return

сейчас эти страницы висят в индексе ПС

никакой значимой информации в выдаче эти страницы не играют

есть ли смысл их закрывать?

Edited April 17, 2018 by krashman

[Otvet]

6 минут назад, krashman сказал:

/sitemap

 

зачем?

[krashman]

1 минуту назад, Otvet сказал:

 

зачем?

ну это которое дерево сайта, а не сам сайтмап.xml

карта сайта для людей

Edited April 17, 2018 by krashman

[Otvet]

2 минуты назад, krashman сказал:

карта сайта для людей

смешно

наверное все пользуются?

[krashman]

Только что, Otvet сказал:

смешно

наверное все пользуются?

так я поэтому и добавил её в список

[Zetx]

че-то ничего не понял...

там же дублирующего контента нету, зачем закрывать то?

 

[krashman]

12 минут назад, Zetx сказал:

че-то ничего не понял...

там же дублирующего контента нету, зачем закрывать то?

 

дублирующего нет

и description у этих страниц не задан никакой, h1 с title тоже надо нормальные писать

надо в каждый файлик лезть и выдумывать тексты

 

но это одна из причин)

основная - то, что нет никакой ценности их нахождения в выдаче

 

но хочу услышать мнения

[krashman]

подскажите, пожалуйста,

яндекс вебмастер говорит, что были проиндексированы следующие страницы

как это могло произойти вообще, если эти страницы

/ekonom/?filter_ocfilter=p:7657-8876
/ekonom/?filter_ocfilter=p:9645-10496

закрыты в robots.txt через Disallow: /*?filter_ocfilter=

и инструмента яндекса анализ robots.txt это подтверждает:

 

страницы без чпу непонятные мне

/index.php?route=product/category&manufacturer_id=23&page=2
/index.php?route=product/category&manufacturer_id=64&page=3
/index.php?route=product/category&path=439

вообще непонятно где нашёл, они вообще 404 "КАТЕГОРИЯ НЕ НАЙДЕНА"

да и все товары и категории с ЧПУ