Файл Sitemap содержит URL, доступ к которым заблокирован

[onnia]

Здравствуйте!

 

Такое сообщение выдает в инструментах веб мастера GOOGLE 

 

Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

 

отправлено на индексацию 350 ссылок.  проблем 189 ссылок

 

Как исправить?

Заранее спасибо за ответы!

 

[snastik]

А сеоурлы не пробовали прописать ?

[chukcha]

Посмотреть генератор карты - найти генерацию запрещенных урлов

[snastik]

к бабке не ходи - там в роботсе закрыто или path или product_id, а чпу прописать поленились.

[chukcha]

без бокала - нет вокала

[onnia]

к бабке не ходи - там в роботсе закрыто или path или product_id, а чпу прописать поленились.

 

Да, было закрыто product_id. СПАСИБО!

 

И подскажите еще. В ошибках сканирования найдено 296 страниц с ошибкой 404. Этих страниц реально нет уже, они удалены. Как исправить ситуацию, чтоб они исчезли с ошибок?

[spambot]

Ошибки исчезнут сами со временем

[onnia]

Ошибки исчезнут сами со временем

 

т,е. не обращать внимания на них?

[spambot]

по желанию) можете обращать, но делать с ними ничего не нужно. Старайтесь просто не удалять товар. Если товар более не появится можно поставить ссылки на другие товары-аналоги заодно передать им вес

[onnia]

по желанию) можете обращать, но делать с ними ничего не нужно. Старайтесь просто не удалять товар. Если товар более не появится можно поставить ссылки на другие товары-аналоги заодно передать им вес

 

СПАСИБО!!!

[onnia]

Возник еще один вопрос. Гугл вебмастер выдал вчера предупреждение такого содержания:

 

 

 

Когда мы проверили несколько URL из вашего файла Sitemap, то обнаружили, что файл robots.txt для сайта блокирует доступ к некоторым URL. Если вы не планируете заблокировать некоторые URL, содержащиеся в файле Sitemap, воспользуйтесь нашим инструментом для анализа файла robots.txt, чтобы убедиться в том, что робот Google может перейти по отправленным вами URL. Все доступные URL будут по-прежнему отправляться

 

В качестве примера указал действующую страницу на сайте. Как сделать так, чтобы ссылку не блокировали?

Заранее спасибо!

[onnia]

Сейчас роботс выглядит так

 

User-agent: *

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /admin

Disallow: /catalog

Disallow: /download

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*?tracking=

Disallow: /*&tracking=

Host: mama-market.net.ua

 

User-agent: Yandex

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /admin

Disallow: /catalog

Disallow: /download

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Host: mama-market.net.ua

Sitemap: http://mama-market.net.ua/sitemap.xml

 

а ссылка, которую выдал гугл эта 

 

http://mama-market.net.ua/catalog1/dutiki/711.html

 

очень надеюсь на Вашу помощь!

[spambot]

попробуйте либо убрать записи Disallow: /catalog(тогда вы откроете для индекса эту ссылку но и ссылки без сеоупла) или переделать сео урл категории если сайт только запущен и еще только индексируется. Если он уже приносит трафик то нужно еще будет сделать 301 редирект со старого адреса категории на новый 

[onnia]

попробуйте либо убрать записи Disallow: /catalog(тогда вы откроете для индекса эту ссылку но и ссылки без сеоупла) или переделать сео урл категории если сайт только запущен и еще только индексируется. Если он уже приносит трафик то нужно еще будет сделать 301 редирект со старого адреса категории на новый 

 

Спасибо! Открыла каталог для индексации и сделала редиректы. 

[tomasmorgam]

Здравствуйте! Подскажите, пожалуйста, почему блокируются все ссылки в карте? Результат гугл, моя карта, robots.txt.