Перейти к содержанию
SegoMr

Помогите, пожалуйста, разобраться с robots.txt

Рекомендуемые сообщения

Запутался в зеркалах. В Яндекс-Вэбмастер у меня как главное зеркало выбран адрес сайта без префикса WWW, а в файле robots.txt Host: www.мой_сайт.ru . 

 

Не ошибся ли я, указав префикс в роботсе? Содержание файла я тупо скопировал из форума, только поставил внизу свой сайт.

 

 

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /wishlist
Disallow: /login
Disallow: /index.php?route=product/manufacturer
Disallow: /index.php?route=product/compare
Disallow: /index.php?route=product/category
Host: www.мой_сайт.ru --------------  с префиксом или без?
Sitemap: http://мой_сайт.ru/sitemap.xml

 

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
В Яндекс-Вэбмастер у меня как главное зеркало выбран адрес сайта без префикса WWW

 

Так же сделайте и в директиве host

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Так же сделайте и в директиве host

 

Спасибо за ответ. 

А как лучше? Сейчас я в роботсе прописал без префикса: Host: мой_сайт.ru . Потому что Яндекс сам выбрал этот адрес как главное зеркало, подумал может так лучше будет. А вообще как лучше или как должно быть? 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
А как лучше? Сейчас я в роботсе прописал без префикса: Host: мой_сайт.ru . Потому что Яндекс сам выбрал этот адрес как главное зеркало, подумал может так лучше будет. А вообще как лучше или как должно быть?

 

По сути, не важно как. Главное, выбрать один вариант и  никогда его не менять

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

По сути, не важно как. Главное, выбрать один вариант и  никогда его не менять

 

ОК. Спасибо.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

По сути, не важно как. Главное, выбрать один вариант и  никогда его не менять

 

Помогите, пожалуйста, еще разобраться с этими строками в роботсе:

 

Disallow: /index.php?route=product/manufacturer

Disallow: /index.php?route=product/compare

Disallow: /index.php?route=product/category

 

Что они запрещают? Робот будет попадать на мои страницы с категориями и товарами?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Запрещают индексацию страниц: товаров производителей, сравнения товаров и категорий. Если на сайте работает чпу - то все нормально. Если нет, убирите Disallow: /index.php?route=product/category

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Запрещают индексацию страниц: товаров производителей, сравнения товаров и категорий. Если на сайте работает чпу - то все нормально. Если нет, убирите Disallow: /index.php?route=product/category

 

Извините, еще помучаю Вас, немного.  :-)

 

ЧПУ включен, значит оставляю как есть?

Если при включенном ЧПУ уберу эти строки, это будет как-то мешать?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

ЧПУ включен, значит оставляю как есть?

Если при включенном ЧПУ уберу эти строки, это будет как-то мешать?

 

В общем, убирать их не стоит

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

В общем, убирать их не стоит

 

Спасибо за помощь. Удачи и Успеха во всём!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти

  • Похожий контент

    • От Caribe
      Добрый день, необходимо увеличить отображение фотографий товаров на главной странице, в каталогах и в самой карточке товара.
      Так же устранить медленную загрузку страниц. Cайт goomy.ru
      Пишите в лс по стоимости работы.
    • От vad4311
      Есть сайт noutix.ru, на нем хочу сделать главное меню (которое рядом с большим баннером слева) с тремя категориями уровня вложенности. 
      Тоисть чтоб было по формуле Товар-тип товара-модель товара (Компьютеры-Ноутбуки-Samsung R518)
      Помогите кто чем может. Возможно, ктото сделает за небольшое вознаграждение 
    • От eduard174
      Всем доброго дня!
      Просьба поделиться опытом как настроить рекламу своего магазина на Опенкарт 3.0. Магазин создан в июле этого года и до сих пор ни одного заказа....
    • От apushkin
      Русская сборка OpenCart Version 3.0.2.0
      Есть модуль АОП и SupplerMailLink

      Нам требуется:

      1. Автоматически обновлять ассортимент товаров с их характеристиками и фотографиями из файла с сайта донора CSV-файл с описаниями товаров и ссылками на изображения (Т.е. если появился новый товар у поставщика он должен появится и у нас, если поставщик перестал продавать какие-то товары, то у нас он автоматически отключается)

      2. Обновлять цену (с нашим коэффициентом) и остатки товара из другого файла с сайта донора CSV-файл с ценами и наличием

      Задача срочная.
      Жду предложений.
      Мой WhatsApp/Telegram +79313084110
      Александр
    • От weterglass
      Доброго времени суток, опишу суть проблемы:
      Загрузил товары через DKA Export.Import без категорий. Товар на сайте находится и в него можно зайти. При определении ему категории, товар в ней появляется, но стоит нажать на товар, появляется надпись: "Запрашиваемая страница не найдена!".
      Если же создать дубль товара, а основной удалить, то проблема исчезает. Но это долго делать дубли всех товаров. Есть ли более быстрое решение проблемы? 
  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу

×

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.