Корректен ли robots.txt?

[zauspeh2000]

Добрый день. Подскажите, пожалуйста, является ли корректным данное содержимое robots.txt? Вопрос возник из-за того, что одни и те же страницы сайта, то появляются, то исчезают в Яндексе. И на гугл сеарч консоли вдруг появились ошибки покрытия, хотя на сайте значительных изменений не было.

 

 

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter=
Disallow: /*&filter=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

User-agent: Yandex
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter=
Disallow: /*&filter=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Clean-param: tracking

[drondo1241]

4 часа назад, zauspeh2000 сказал:

Добрый день. Подскажите, пожалуйста, является ли корректным данное содержимое robots.txt? Вопрос возник из-за того, что одни и те же страницы сайта, то появляются, то исчезают в Яндексе. И на гугл сеарч консоли вдруг появились ошибки покрытия, хотя на сайте значительных изменений не было.

 

 

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter=
Disallow: /*&filter=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

User-agent: Yandex
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter=
Disallow: /*&filter=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Clean-param: tracking

а  отдельные правила для жужеля и яндекса ...
А чтоб наверняка я бы прописал обще для всех и отдельные для Жу и Я

[Tom]

В 12.12.2021 в 17:26, drondo1241 сказал:

а  отдельные правила для жужеля и яндекса .....

OcStore

https://demo3.ocstore.com/robots.txt

[zauspeh2000]

В 12.12.2021 в 13:26, drondo1241 сказал:

А чтоб наверняка я бы прописал обще для всех и отдельные для Жу и Я

Я не понял ответа. То есть для гугла ещё добавить нужно или нормально?

[kulinenko]

57 минут назад, zauspeh2000 сказал:

Я не понял ответа. То есть для гугла ещё добавить нужно или нормально?

вы понимаете что для каждого сайта свой роботс тхт ?

[zauspeh2000]

9 часов назад, kulinenko сказал:

вы понимаете что для каждого сайта свой роботс тхт ?

Понял уже. Какой специалист его настраивает? Я пробовал разобраться сам, но в интернете очень противоречивая информация, а у меня нет возможности экспериментировать. Сеошник?

[kulinenko]

2 часа назад, zauspeh2000 сказал:

Понял уже. Какой специалист его настраивает? Я пробовал разобраться сам, но в интернете очень противоречивая информация, а у меня нет возможности экспериментировать. Сеошник?

ну я бы сказал что сеоспециалист вместе с программистом который разрабатывает  сайт

[drondo1241]

15 часов назад, zauspeh2000 сказал:

Я не понял ответа. То есть для гугла ещё добавить нужно или нормально?

Желательно прописывать отдельные правила и для Google и для Яндекса и можно еще общее для всех оставить... и ботам проще и вам + в карму....

[optimlab]

16 часов назад, zauspeh2000 сказал:

Я не понял ответа. То есть для гугла ещё добавить нужно или нормально?

Они не увидели слово Яндекс, вот и начали "советовать"...

 

Мы не знаем правильный он или нет без сайта и ваших хотелок по индексации, поэтому вопрос риторическо завис в воздухе.

А правильный ответ вы получите только после того, как скажите зачем вам роботс вообще, если вы не знаете его функцию?

 

Совет: оставьте как есть если не разбираетесь.

 

В 12.12.2021 в 12:44, zauspeh2000 сказал:

Вопрос возник из-за того, что одни и те же страницы сайта, то появляются, то исчезают в Яндексе.

Тут видно что это не из-за роботса, так как Яндекс жёстко слушается его. Скорее всего вспихивают и умирают неканонические страницы. Это нормально, не стоит париться.

 

В 12.12.2021 в 12:44, zauspeh2000 сказал:

И на гугл сеарч консоли вдруг появились ошибки покрытия, хотя на сайте значительных изменений не было.

Вы не привели пример ошибки, чтоб её обсуждать. Мы сейчас слепы и в неведении чтоб вам что либо советовать дельного...

[kulinenko]

11 минут назад, optimlab сказал:

Совет: оставьте как есть если не разбираетесь.

 

я бы вообще удалил роботс - а то позакрывают товары, картинки, категории, производителей

[optimlab]

7 минут назад, kulinenko сказал:

а то позакрывают товары, картинки, категории, производителей

Да, аллоу он забыл проставить. Я даже не заметил.

[zauspeh2000]

4 часа назад, optimlab сказал:

Тут видно что это не из-за роботса, так как Яндекс жёстко слушается его. Скорее всего вспихивают и умирают неканонические страницы. Это нормально, не стоит париться.

Это всегда так будет, или прекратится со временем? Дело в том, что он туда сюда одни и те же страницы гоняет

[zauspeh2000]

Ага, разобрался. Ссылки перелинковки послетали, почему-то. 

[drondo1241]

В 14.12.2021 в 13:51, optimlab сказал:

Они не увидели слово Яндекс, вот и начали "советовать"...

Скажу больше ... мы не увидели не только слово Яндекс но и сам сайт.... тут же все телепаты  нах нам рес и так все видим

[drondo1241]

В 14.12.2021 в 13:51, optimlab сказал:

Они не увидели слово Яндекс, вот и начали "советовать"...

Но судя по вопросу в топике лучше сам сайт нам не видеть.:)))