Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

Помогите, пожалуйста, разобраться с robots.txt


Recommended Posts

Запутался в зеркалах. В Яндекс-Вэбмастер у меня как главное зеркало выбран адрес сайта без префикса WWW, а в файле robots.txt Host: www.мой_сайт.ru . 

 

Не ошибся ли я, указав префикс в роботсе? Содержание файла я тупо скопировал из форума, только поставил внизу свой сайт.

 

 

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /wishlist
Disallow: /login
Disallow: /index.php?route=product/manufacturer
Disallow: /index.php?route=product/compare
Disallow: /index.php?route=product/category
Host: www.мой_сайт.ru --------------  с префиксом или без?
Sitemap: http://мой_сайт.ru/sitemap.xml

 

 

Надіслати
Поділитися на інших сайтах


Так же сделайте и в директиве host

 

Спасибо за ответ. 

А как лучше? Сейчас я в роботсе прописал без префикса: Host: мой_сайт.ru . Потому что Яндекс сам выбрал этот адрес как главное зеркало, подумал может так лучше будет. А вообще как лучше или как должно быть? 

Надіслати
Поділитися на інших сайтах


А как лучше? Сейчас я в роботсе прописал без префикса: Host: мой_сайт.ru . Потому что Яндекс сам выбрал этот адрес как главное зеркало, подумал может так лучше будет. А вообще как лучше или как должно быть?

 

По сути, не важно как. Главное, выбрать один вариант и  никогда его не менять

Надіслати
Поділитися на інших сайтах

По сути, не важно как. Главное, выбрать один вариант и  никогда его не менять

 

Помогите, пожалуйста, еще разобраться с этими строками в роботсе:

 

Disallow: /index.php?route=product/manufacturer

Disallow: /index.php?route=product/compare

Disallow: /index.php?route=product/category

 

Что они запрещают? Робот будет попадать на мои страницы с категориями и товарами?

Надіслати
Поділитися на інших сайтах


Запрещают индексацию страниц: товаров производителей, сравнения товаров и категорий. Если на сайте работает чпу - то все нормально. Если нет, убирите Disallow: /index.php?route=product/category

Надіслати
Поділитися на інших сайтах

Запрещают индексацию страниц: товаров производителей, сравнения товаров и категорий. Если на сайте работает чпу - то все нормально. Если нет, убирите Disallow: /index.php?route=product/category

 

Извините, еще помучаю Вас, немного.  :-)

 

ЧПУ включен, значит оставляю как есть?

Если при включенном ЧПУ уберу эти строки, это будет как-то мешать?

Надіслати
Поділитися на інших сайтах


ЧПУ включен, значит оставляю как есть?

Если при включенном ЧПУ уберу эти строки, это будет как-то мешать?

 

В общем, убирать их не стоит

Надіслати
Поділитися на інших сайтах

Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз

×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.