skyline1983

Ребят помогите с настройкой robots txt. Что не так. Выдает ошибку

Рекомендуемые сообщения

skyline1983    0
Страницы с заблокированными ресурсами

Ругается на Disallow: /*route=account/

и ругался на Clean-param: tracking я эту строку удалил.

 

Что нужно поправить? 

 

User-agent: *

Allow: /*.css

Allow: /*.js

Allow: /*.jpg

Allow: /*.png

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /download

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*?tracking=

Disallow: /*&tracking=

Disallow: /&coolfilter*

Disallow: /?coolfilter*

 

User-agent: Yandex

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /download

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /&coolfilter*

Disallow: /?coolfilter*

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

 

Host: -----------

Sitemap: -----

Изменено пользователем skyline1983

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vise    14

Может проще забыть про robots.txt и сделать все через мета-тег Robots?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Otvet    371

Нет не проще

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
vise    14

Нет не проще

Делать дольше в итоге проще. Если стандартный опенкарт, без сео про, в роботсе и с чпу страница и без чпу, потом когда ком нарастает, разобраться сложно. Я свой первый магазин вспомнил сейчас. В итоге сделал чекбокс на товарах, категориях и тд, если флажок стоит - вылетает метатег и ничего не индексируется. 

 

Пример из жизни, парсю кучу товара или нет времени или возможности на весь товар тексты написать, соот-но копируется с сайта производителя, чтобы оно в индекс залетело мне не нужно и в роботс эту кучу ссылок желания пихать абсолютно никакого нет. Проблема решается метатегами. По мере написания текста запрет от индексации убирается и товар залетает в поиск.

 

PS: Автор, стили и скрипты зря в роботсе прописаны. Гугл говорит что ему это может помешать правильно визуализировать страницу

Изменено пользователем vise

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Otvet    371
vise

начнем с того что не нужно путать правила и единичные страницы

далее не нужно обобщать, такие случаи крайне редки и копирование с сайта производителя это норма

http://shop.lenovo.com/ru/ru/laptops/lenovo/yoga/yoga-2-13/
http://www.eldorado.ru/cat/detail/71096140/

но речь не об этом

 

 

как удобнее в туалете: когда на двери знак занято или когда вы ломитесь а вам кричат "занято" ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти


  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу