/index.php закрыть в роботе

[Skymih]

 Закрываю Disallow: /index.php в роботе - закрывается карта сайта.

Надо закрыть в роботе - как это сделать?

[snastik]

может как то так ? решить вашу проблему http://ocshop.info/nastrojka-htaccess-dlya-opencart/

но если очень хотите закрыть в роботсе то дайте карте сайта seo_url выполнив в базу запрос либо воспользовавшись урл менеджером

[puno]

 Закрываю Disallow: /index.php в роботе - закрывается карта сайта.

Надо закрыть в роботе - как это сделать?

 

Disallow: /index.php

Allow: /index.php?route=feed/google_sitemap

[Skymih]

snastik спасибо 301 есть и все работает :-)

 

 

puno спасибо все самое простое - для меня сложное)

 

Вообще проще в роботе все что надо разрешить ( у меня в роботе 155 позиций под запрет) - все остальное тупо закрыть одной фразой - это возможно?  Или я мечтатель :-D

[puno]

snastik спасибо 301 есть и все работает :-)

 

 

puno спасибо все самое простое - для меня сложное)

 

Вообще проще в роботе все что надо разрешить ( у меня в роботе 155 позиций под запрет) - все остальное тупо закрыть одной фразой - это возможно?  Или я мечтатель :-D

 

 

Disallow: /          фраза все запретить

Allow: что разрешить

[Гість brk]

Disallow: /          фраза все запретить

Allow: что разрешить

По факту только disalow учитывается.

Остальное по умолчанию allow

[puno]

По факту только disalow учитывается.

Остальное по умолчанию allow

 

Вот по факту все написано

 

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#allow-disallow

https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt

 

Использование директив Disallow и Allow

 

Проверить факт можно здесь

https://www.google.com/webmasters/tools/home?hl=ru

 

Заблокированные URL

[Гість brk]

Вот по факту все написано

 

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#allow-disallow

https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt

 

Использование директив Disallow и Allow

 

Проверить факт можно здесь

https://www.google.com/webmasters/tools/home?hl=ru

 

Заблокированные URL

Бот индексирует всё то, что не запрещено (disallow)

Поэтому какой смысл в этом allow в опенкарте?

[puno]

Бот индексирует всё то, что не запрещено (disallow)

Поэтому какой смысл в этом allow в опенкарте?

 

 

Вот в чем.

 

snastik спасибо 301 есть и все работает :-)

 

 

puno спасибо все самое простое - для меня сложное)

 

Вообще проще в роботе все что надо разрешить ( у меня в роботе 155 позиций под запрет) - все остальное тупо закрыть одной фразой - это возможно?  Или я мечтатель :-D

[snastik]

как говорит уважаемый BRK по факту :-) есть такая штука что robots.txt имеет свои плюсы и минусы, речь идет о том что если что то попало в индекс и потом оно закрыто директивой Disallow оно в индексе и останется, что бы вы не делали и это говорит о том что редирект всегда лучше чем запрет, ну и ненужно забывать про noindex но в каждом конкретном случае, нужно использовать то что больше отвечает требованиям задачи.