Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

robots.txt

boxbaster
 Share

Recommended Posts

Aligarh Apprentice

Aligarh

Опубліковано:
Опубліковано:

Подскажите друзя ......Что ето за ошибка при анализе Гугл от чего может быть ?User-agent: *

какойто знак вопроса откуда он взялся. В файле нету ...

Аналіз файлу robots.txt

Значення Результат Ряд 1: ?User-agent: * Незрозумілий синтаксис Ряд 2: Disallow: /index.php?route=account Користувацький агент не вказаний Ряд 3: Disallow: /index.php?route=checkout Користувацький агент не вказаний Ряд 4: Disallow: /index.php?route=common Користувацький агент не вказаний Ряд 5: Disallow: /index.php?route=product Користувацький агент не вказаний Ряд 6: Disallow: /index.php?route=information/information&information_id= Користувацький агент не вказаний Ряд 7: Disallow: /*?manufacturer Користувацький агент не вказаний Ряд 8: Disallow: /*?sort Користувацький агент не вказаний Ряд 9: Disallow: /*?order Користувацький агент не вказаний Ряд 10: Disallow: /*?keyword Користувацький агент не вказаний Ряд 11: Disallow: /admin/ Користувацький агент не вказаний Ряд 12: Disallow: /download/ Користувацький агент не вказаний Ряд 13: Disallow: /catalog/ Користувацький агент не вказаний Ряд 14: Disallow: /system/ Користувацький агент не вказаний

Надіслати
Поділитися на інших сайтах

Yoda Grand Master

Yoda

Опубліковано:
Опубліковано:

Подскажите друзя ......Что ето за ошибка при анализе Гугл от чего может быть ?User-agent: *

какойто знак вопроса откуда он взялся. В файле нету ...

А как бы так вот было бы не проще, просто весь роботс тут написать ?

Надіслати
Поділитися на інших сайтах

Yesvik Veteran

Yesvik

Опубліковано:
Опубліковано:

Подскажите друзя ......Что ето за ошибка при анализе Гугл от чего может быть ?User-agent: *

какойто знак вопроса откуда он взялся. В файле нету ...

UTF-8 BOM
Надіслати
Поділитися на інших сайтах
1

rock Enthusiast

rock

Опубліковано:
Опубліковано:

Подскажите пожалуйста, у меня выдает ошибки сканирования.

Вот мой robots

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

Ошибки такого вида:

Показать URL-адреса: Заблокирован файлом robots.txt ‎(155)‎

http://www.сайт.com/категория/?limit=50
http://www.сайт.com/категория/?limit=25
http://www.сайт.com/категория/?sort=pd.name&order=DESC
http://www.сайт.com/категория/?sort=p.price&order=ASC
http://www.сайт.com/index.php?route=product/category&path=70&limit=100
http://www.сайт.com/категория/?sort=p.model&order=ASC

Скажите пожалуйста, это нормально, так и должно быть?

Спасибо.

Надіслати
Поділитися на інших сайтах

snastik Grand Master

snastik

Опубліковано:
Опубліковано:

Вы шутите ? это тоже самое я закрыл дверь а теперь бандиты не могут ко мне зайти :-)

вобщем это нормально

закрыты сортировки лимиты и тд и тп они в индексе уж точно не нужны

Надіслати
Поділитися на інших сайтах
1

  • 2 months later...
Alina Enthusiast

Alina

Опубліковано:
Опубліковано:

Правила для mod_rewrite должны начинаться так

RewriteEngine On
RewriteBase /
где RewriteEngine On включает mod_rewrite, а RewriteBase / устанавливает путь относительно которого будут работать правила mod_rewrite

Если магазин установлен в корень сайта то в RewriteBase пишется слеш, если магазин установлен в папку то надо указывать эту папку.

Например, если магазин установлен в папку shop то надо писать RewriteBase /shop

Заканчиваться правила должны вот так

RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]
Это, так сказать, последняя инстанция действия которой можно описать примерно так:

Если для запроса нет соответствующего файла ( RewriteCond %{REQUEST_FILENAME} !-f) или директории ( RewriteCond %{REQUEST_FILENAME} !-d) то отправлять запрос скрипту index.php в параметре _route_ со всеми параметрами ( RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]) и пусть скрипт сам принимает решение что с этим запросом делать.

Все свои правила надо добавлять между этими блоками

В файле .htaccess вот этот блок

RewriteEngine On
RewriteBase /
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]
RewriteCond %{HTTP_HOST} ^barbados-fs.ru$ [NC]
RewriteRule ^(.*)$ http://www.barbados-fs.ru/$1 [R=301,L]
надо исправить на такой

RewriteEngine On
RewriteBase /

RewriteCond %{HTTP_HOST} ^barbados-fs.ru$ [NC]
RewriteRule ^(.*)$ http://www.barbados-fs.ru/$1 [R=301,L]

RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]
либо с использованием универсальной записи, не привязанной к конкретному домену, как предложил Vladzimir

RewriteEngine On
RewriteBase /

RewriteCond %{HTTP_HOST} !^$  [NC]
RewriteCond %{HTTP_HOST} !^www. [NC]
RewriteRule ^(.*)$ http://www.%{HTTP_HOST}/$1 [R=301,L]

RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]


RewriteCond %{HTTP_HOST} !^www. [NC]
это не откуда редиректить, это условие при истинности которого исполняется следующее за условием правило

В данном случае уловие на человеческом языке звучит примерно так: если HTTP_HOST не начинается с www. без учета регистра символов

Кроме этого я добавил в начало ещё одно условие которое проверяет не пустая ли у нас HTTP_HOST

RewriteRule ^(.*)$ http://www.%{HTTP_HOST}/$1 [L,R=301]
А это правило которое выполнится если предыдущее условие истина.

В условии я убрал (.*)$ - это лишнее и никак не используется ... этот кусок условия звучит так: могут быть любые символы до конца строки которые надо запомнить... А нам пофиг что там может или не может быть и запоминать нам это не надо...

(.*)$ может понадобиться только для редиректа с www на без www так как нам надо получить HTTP_HOST без www

Это вот так делается

RewriteCond %{HTTP_HOST} !^$  [NC]
RewriteCond %{HTTP_HOST} ^www.(.*)$ [NC]
RewriteRule ^(.*)$ http://%1/$1 [R=301,L]

Если после настройки переадресации на www не получается зайти в админку то скорее всего ты устанавливал магазин по адресу без www

Что-бы работало надо изменить адрес в конфигах и в настройках на адрес с www

По поводу robots.txt почитай тут http://help.yandex.r...d=996567#996571

Особенно обрати внимание на это примечание

Подскажите пожалуйста не совсем понимаю.

Вот мой .htaccess

RewriteBase /

RewriteRule ^sitemap.xml$ index.php?route=feed/google_sitemap [L]

RewriteRule ^googlebase.xml$ index.php?route=feed/google_base [L]

RewriteRule ^yandexmarket.xml$ index.php?route=feed/yandex_market [L]

RewriteCond %{REQUEST_FILENAME} !-f

RewriteCond %{REQUEST_FILENAME} !-d

RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]

Мне надо сделать 301 редирект с www на без www

Т.е. перед RewriteBase / мне надо дописать RewriteEngine On, а потом добавить

RewriteCond %{HTTP_HOST} ^www.мойсайт.ru$ [NC]

RewriteRule ^(.*)$ http://мойсайт.ru/$1 [R=301,L] и сделать пробел(строку) и дописать все остальное?

Я правильно понимаю?

Простите за глупые вопросы, но я уже вообще запуталась... :cry:

Надіслати
Поділитися на інших сайтах

  • 2 months later...
OldAine Veteran

OldAine

Опубліковано:
Опубліковано:

Подскажите пожалуйста не совсем понимаю.

Вот мой .htaccess

RewriteBase /

RewriteRule ^sitemap.xml$ index.php?route=feed/google_sitemap [L]

RewriteRule ^googlebase.xml$ index.php?route=feed/google_base [L]

RewriteRule ^yandexmarket.xml$ index.php?route=feed/yandex_market [L]

RewriteCond %{REQUEST_FILENAME} !-f

RewriteCond %{REQUEST_FILENAME} !-d

RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]

Мне надо сделать 301 редирект с www на без www

Т.е. перед RewriteBase / мне надо дописать RewriteEngine On, а потом добавить

RewriteCond %{HTTP_HOST} ^www.мойсайт.ru$ [NC]

RewriteRule ^(.*)$ http://мойсайт.ru/$1 [R=301,L] и сделать пробел(строку) и дописать все остальное?

Я правильно понимаю?

Простите за глупые вопросы, но я уже вообще запуталась... :cry:

ваш Файл должен выглядеть вот так:

RewriteBase /

RewriteCond %{HTTP_HOST} ^www.sait.ru$ [NC]

RewriteRule ^(.*)$ http://sait.ru/$1 [R=301,L]

RewriteRule ^sitemap.xml$ index.php?route=feed/google_sitemap [L]

RewriteRule ^googlebase.xml$ index.php?route=feed/google_base [L]

RewriteRule ^yandexmarket.xml$ index.php?route=feed/yandex_market [L]

RewriteCond %{REQUEST_FILENAME} !-f

RewriteCond %{REQUEST_FILENAME} !-d

RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]

Надіслати
Поділитися на інших сайтах
1

  • 2 weeks later...
FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

Прощу помощи гляньте мой robots.txt а то начались проблемы из индекса пропали 7300 страниц из 10000 sitemap.xml ест ь и все там присутствует грешу на robots.txt помогите разобрать вчем я намудрил,

мой robots.txt

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=
Disallow: /*keyword=
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*route=common/home
Allow: /
sitemap: http://site.ru/sitemap.xml
Disallow: /search
Crawl-delay: 4.5 # задает таймаут в 4.5 секунды

Disallow: /*?manufacturer
#Запрещаем индексировать все страницы производителей, так как они уже есть у нас с сео-урл

Disallow: /*?sort
#Запрещаем индексировать все страницы с разными видами сортировок, ибо иначе у нас будет десяток дублей одной и той же страницы

Disallow: /*?order
#Запрещаем индексировать все страницы с разными видами порядка вывода, причины те же

Disallow: /*?keyword
#Запрещаем индексировать все страницы с метками



User-agent: Yandex
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Clean-param: tracking
Clean-param: filter_name
Clean-param: filter_sub_category
Clean-param: filter_description
Host: site.ru
Crawl-delay: 2 # задает таймаут в 2 секунды
Надіслати
Поділитися на інших сайтах

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

В данный момент сменил на вот этот для проверки

Мой новый robots.txt

User-agent: *
Disallow: /index.php?route=account
Disallow: /index.php?route=checkout/cart
Disallow: /index.php?route=checkout/shipping
Disallow: /index.php?route=common/home
Disallow: /index.php?route=product/product/captcha
Disallow: /index.php?route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*?sort
Disallow: /*?order
Allow: /
sitemap: http://site.ru/sitemap.xml
User-Agent: Yandex
Host: site.ru
sitemap: http://site.ru/sitemap.xml
Надіслати
Поділитися на інших сайтах

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

Чуть поправил ещё может кто поможет советом хоть каким а то я шя опять тут наваяю ))))

Мой robots.txt

User-agent: *
Disallow: /index.php?route=account
Disallow: /index.php?route=checkout/cart
Disallow: /index.php?route=checkout/shipping
Disallow: /index.php?route=common/home
Disallow: /index.php?route=product/product/captcha
Disallow: /index.php?route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*?sort
Disallow: /*?order
Allow: /
sitemap: http://site.ru/sitemap.xml
User-Agent: Yandex
Host: site.ru
sitemap: http://site.ru/sitemap.xml
User-Agent: Googlebot
Host: site.ru
sitemap: http://site.ru/sitemap.xml
Надіслати
Поділитися на інших сайтах

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

переделал ))) может уже кто что нибудь скажет или пара валить на другой форум?

мой robots.txt


User-agent: *
Disallow: /index.php?route=account
Disallow: /index.php?route=checkout/cart
Disallow: /index.php?route=checkout/shipping
Disallow: /index.php?route=common/home
Disallow: /index.php?route=product/product/captcha
Disallow: /index.php?route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*?sort
Disallow: *http://site.ru/index.php?


User-Agent: Yandex
Disallow: /index.php?route=account
Disallow: /index.php?route=checkout/cart
Disallow: /index.php?route=checkout/shipping
Disallow: /index.php?route=common/home
Disallow: /index.php?route=product/product/captcha
Disallow: /index.php?route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*?sort
Disallow: *http://site.ru/index.php?


User-agent: Googlebot
Disallow: /index.php?route=account
Disallow: /index.php?route=checkout/cart
Disallow: /index.php?route=checkout/shipping
Disallow: /index.php?route=common/home
Disallow: /index.php?route=product/product/captcha
Disallow: /index.php?route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*product/product&product_id=
Disallow: /*product/category&path=
Disallow: /*?sort
Disallow: *http://site.ru/index.php?
Host: site.ru
sitemap: http://site.ru/sitemap.xml
Надіслати
Поділитися на інших сайтах

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

переделал )))

мой robots.txt


User-agent: *
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*

User-Agent: Yandex
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*

User-agent: Googlebot
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*
Host: site.ru
sitemap: http://site.ru/sitemap.xml
Надіслати
Поділитися на інших сайтах

OldAine Veteran

OldAine

Опубліковано:
Опубліковано:

Ну роботс у вам нормальный, я себе такой-же собираюсь сделать.

Вот только гуглботс не нужен в принципе гугл и так всю инфу прочтет, он в отличии от яши с мозгами...

Это что вообще? - работать то будет?

Надіслати
Поділитися на інших сайтах
1

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

Ну роботс у вам нормальный, я себе такой-же собираюсь сделать.

Вот только гуглботс не нужен в принципе гугл и так всю инфу прочтет, он в отличии от яши с мозгами...

Это что вообще? - работать то будет?

Во переделал последний вариант )

User-agent: *
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*
Host: site.ru
sitemap: http://site.ru/sitemap.xml
Надіслати
Поділитися на інших сайтах

FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

А куда "User-Agent: Yandex" дели? - Я же говорю яндекс тупой, ему нужно указывать специально для него, ото раз на раз не приходиться.

User-agent: *
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*
Host: site.ru
sitemap: http://site.ru/sitemap.xml
User-Agent: Yandex
Disallow: /*route=account/login
Disallow: /*route=checkout/cart
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /index.php?*

А так что скажете?

Надіслати
Поділитися на інших сайтах

  • 3 weeks later...
IldarPateev Contributor

IldarPateev

Опубліковано:
Опубліковано:

Ребята, помогите пажалуйста кто знает!

Вот что происходит при добавлении, точнее проверке sitemap в валидаторе яндекс-вебмастера

Прописываю http://genius-gadget.ru/sitemap.xml

Выдает:

Указанный URL выполняет на другой сайт и не может быть добавлен в качестве файла Sitemappost-21569-0-00738600-1348085763_thumb.jpg

Не понимаю какое ещё перенаправление? Адрес сайта http://genius-gadget.ru

Если прописать так: http://genius-gadget.ru/index.php?route=feed/google_sitemap

Выдает:

Указанный URL запрещен к индексированию в файле robots.txt.post-21569-0-39984400-1348085823_thumb.jpg

Там в robots.txt стоит Disallow: /index.php?* Что будет если убрать? За что отвечает эта строчка?

Надіслати
Поділитися на інших сайтах

OldAine Veteran

OldAine

Опубліковано:
Опубліковано:

Ни кто не может помочь?

Это означает, что у вас закрыты все адреса начинающиеся с index.php?* Лично у меня в роботсе такого запрета нет.

Что касается яндекса, попробуйте прописать не этот адрес, а тот что был дан изначально - "http://www.Ваш сайт.ru/index.php?route=feed/google_sitemap". Этот адрес можно получить в админке по пути: Дополнения -> каналы продвижения -> гугл сайтмап

Надіслати
Поділитися на інших сайтах
1

IldarPateev Contributor

IldarPateev

Опубліковано:
Опубліковано:

Это означает, что у вас закрыты все адреса начинающиеся с index.php?* Лично у меня в роботсе такого запрета нет.

Что касается яндекса, попробуйте прописать не этот адрес, а тот что был дан изначально - "http://www.Ваш сайт.ru/index.php?route=feed/google_sitemap". Этот адрес можно получить в админке по пути: Дополнения -> каналы продвижения -> гугл сайтмап

Спасибо, это понятно. Просто возможны образования дублей... я использую модифицированный SEO

Надіслати
Поділитися на інших сайтах

  • 1 month later...
rsn Rising Star

rsn

Опубліковано:
Опубліковано:

привет

посмотрите мой robots.txt

User-agent: *

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /catalog

Disallow: /download

Disallow: /export

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*?tracking=

Disallow: /*&tracking=

User-agent: Yandex

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /catalog

Disallow: /download

Disallow: /export

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Clean-param: tracking

Надіслати
Поділитися на інших сайтах

  • 3 months later...
FOX864 Community Regular

FOX864

Опубліковано:
Опубліковано:

Так вообще все мои сообщения выше с попытками robots.txt вышли не удачей страницы так и не вернулись =(((

Прошу помощи глянуть мой robots.txt что не так все ссылки на сайте у меня чпу.

User-agent: *

Disallow: /cgi-bin/

Disallow: /admin

Disallow: /cache

Disallow: /niks

Disallow: /catalog

Disallow: /download

Disallow: /export

Disallow: /system

Disallow: /404

Disallow: /route=account/*

Disallow: /route=account/login*

Disallow: /route=checkout/*

Disallow: /route=checkout/cart*

Disallow: /route=affiliate/*

Disallow: /route=product/search*

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /?sort=*

Disallow: /?sort*

Disallow: /&sort=*

Disallow: /?order=*

Disallow: /?order*

Disallow: /&order=*

Disallow: /?limit=*

Disallow: /&limit=*

Disallow: /?filter_name=*

Disallow: /&filter_name=*

Disallow: /?filter_sub_category=*

Disallow: /&filter_sub_category=*

Disallow: /?filter_description=*

Disallow: /&filter_description=*

Disallow: /?tracking=*

Disallow: /&tracking=*

Disallow: /?manufacturer*

Disallow: /?keyword*

Disallow: /index.php?*

Clean-param: tracking

Clean-param: filter_name

Clean-param: filter_sub_category

Clean-param: filter_description

sitemap: http://site.ru...map/sitemap.xml

User-agent: Yandex

Disallow: /cgi-bin/

Disallow: /admin

Disallow: /cache

Disallow: /niks

Disallow: /catalog

Disallow: /download

Disallow: /export

Disallow: /system

Disallow: /404

Disallow: /route=account/*

Disallow: /route=account/login*

Disallow: /route=checkout/*

Disallow: /route=checkout/cart*

Disallow: /route=affiliate/*

Disallow: /route=product/search*

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /?sort=*

Disallow: /?sort*

Disallow: /&sort=*

Disallow: /?order=*

Disallow: /?order*

Disallow: /&order=*

Disallow: /?limit=*

Disallow: /&limit=*

Disallow: /?filter_name=*

Disallow: /&filter_name=*

Disallow: /?filter_sub_category=*

Disallow: /&filter_sub_category=*

Disallow: /?filter_description=*

Disallow: /&filter_description=*

Disallow: /?tracking=*

Disallow: /&tracking=*

Disallow: /?manufacturer*

Disallow: /?keyword*

Disallow: /index.php?*

Clean-param: tracking

Clean-param: filter_name

Clean-param: filter_sub_category

Clean-param: filter_description

Host: site.ru

sitemap: http://site.ru...map/sitemap.xml

Думаю сейчас добавить Allow: / перед sitemap в User-agent: Yandex

Что скажите поможет вернуть ссылки? и вообще что скажите про роботс

Надіслати
Поділитися на інших сайтах

Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
 Share
Перейти до списку тем

  • Зараз на сторінці   0 користувачів

    • Ні користувачів, які переглядиють цю сторінку

Покупцям

Розробникам

Корисна інформація

Останні розширення

×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.

  Я даю згоду