Jump to content

Recommended Posts

Posted (edited)

Здравствуйте! У меня на сайте, в контроллере категории прописано условие - если на странице включена сортировка (?sort) или лимит (?limit) и т.п., то на страницу добавляется мета-тег robots content="noindex,follow" . В файле robots.txt тоже стоит /disallow на такие страницы сортировок. Часто в статьях по SEO пишут, что нельзя одновременно использовать noindex и закрытие в robots.txt ...

На чём это утверждение обосновано и почему нельзя оба варианта сразу? Как считате, коллеги? Как вообще на такие рекомендации реагируют Гугл и Яндекс?

Edited by bivit1993

Share this post


Link to post
Share on other sites
1 час назад, bivit1993 сказал:

Здравствуйте! У меня на сайте, в контроллере категории прописано условие - если на странице включена сортировка (?sort) или лимит (?limit) и т.п., то на страницу добавляется мета-тег robots content="noindex,follow" . В файле robots.txt тоже стоит /disallow на такие страницы сортировок. Часто в статьях по SEO пишут, что нельзя одновременно использовать noindex и закрытие в robots.txt ...

На чём это утверждение обосновано и почему нельзя оба варианта сразу? Как считате, коллеги? Как вообще на такие рекомендации реагируют Гугл и Яндекс?

гугл вообще ни как не реагирует ни на первое ни на второе

Share this post


Link to post
Share on other sites
8 часов назад, bivit1993 сказал:

Здравствуйте! У меня на сайте, в контроллере категории прописано условие - если на странице включена сортировка (?sort) или лимит (?limit) и т.п., то на страницу добавляется мета-тег robots content="noindex,follow" . В файле robots.txt тоже стоит /disallow на такие страницы сортировок. Часто в статьях по SEO пишут, что нельзя одновременно использовать noindex и закрытие в robots.txt ...

Правильно пишут. Если в файле роботс запрещено сканирование, то сканирующий бот не прочитает тег noindex,  и не закроет страницу от индексирования другим ботом, который по ссылкам гуляет.
 

Цитата

Обнаружение метатегов robots и HTTP-заголовков X-Robots-Tag происходит при сканировании URL. Если сканирование страницы запрещено файлом robots.txt, то директивы, касающиеся индексирования или показа контента, будут проигнорированы. Чтобы гарантировать выполнение директив, не следует запрещать сканирование URL, для которых они заданы.

https://developers.google.com/search/reference/robots_meta_tag
Так что лучше только noindex. Но гарантий никаких, сочтет сильно нужным - все равно проиндексирует.

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
You are posting as a guest. If you have an account, please sign in.
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

Sign in to follow this  

  • Recently Browsing   0 members

    No registered users viewing this page.

×

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.