Перейти к публикации
Поиск в
  • Дополнительно...
Искать результаты, содержащие...
Искать результаты в...

опять же robots


Рекомендованные сообщения

Сёрча форум, видел множество вариантов роботса, несколько тем аля "внутренняя оптимизация о опенкарт"

но почему то ниразу не видел, чтоб народ закрывал вот эти страницы

http://demo.myopencart.ru/index.php?route=information/sitemap

Изображение

И вот меня стали сомнения одолевать, надо ли их закрывать?) Что скажете?

и еще

у многие за эталон держат нечто подобное

Disallow: /*route=account/login

Disallow: /*route=account/create

Disallow: /*route=account/success

Disallow: /*route=account/logout

почему нельзя все это заменить одним правилом

Disallow: /*route=account

?

В чем мои домыслы верны, а в чем нет?

Ссылка на комментарий
Поделиться на других сайтах


Файл Robots.txt - необходим для того, чтобы указать поисковой машине, какие страницы сайта индексировать не следует.

Например, в официальной сборки OpenCart файл Robots.txt отсутствует изначально. А в "нашей", уже добавлен, так сказать для удобства, и его применение/использование, зависит только от Вас самих. В общем, когда Вы задумаетесь о том, как бы сделать так, чтобы эта страница или этот каталог не попали в индекс поисковой машины, вот тогда Вам и потребуется этот файл. Но, по правде говоря, поисковые системы и так не индексируют страницы, на которые требуются логин и пароль, а во-вторых, если на эту страницу никто не ссылается, то она никогда и не будет найдена поисковиками. Так что, можете особо не париться.

На основе цитированного (главное подчеркнул), всё - что Вы написали выше - излишне.

Ссылка на комментарий
Поделиться на других сайтах

Файл Robots.txt - необходим для того, чтобы указать поисковой машине, какие страницы сайта индексировать не следует.

Не совсем так, точнее совсем не так...

В robots.txt можно указать какие страницы не надо включать в индекс, но это не гарантирует что эти указания будут выполнены, и абсолютно не означает что поисковики не будут шариться по этим страницам.

если на эту страницу никто не ссылается, то она никогда и не будет найдена поисковиками

Если интересно могу рассказать как поисковики находят и включают в индекс сайты о которых знает пару человек и ссылок на эти сайты 100% нет...
Ссылка на комментарий
Поделиться на других сайтах

tim21701, пользуясь опытом, а не чьими то фразами сделайте заключение.

Yesvik, если хостинг шаред, то 1) есть куча сервисов, которые показывают, какие сайта там прикручены - оттуда роботы и лезут на домен, который регнут пару дней назад. Да и сами роботы походу окучивают хорошо все сайты, что на одном ипе огромной пачкой сидят.

А вот по моим вопросам, Yesvik, что скажете:?

ps: палю тему, можно в топе норм сидеть, если прихоститься хорошо;)

Ссылка на комментарий
Поделиться на других сайтах


Yesvik, если хостинг шаред, то 1) есть куча сервисов, которые показывают, какие сайта там прикручены - оттуда роботы и лезут на домен, который регнут пару дней назад. Да и сами роботы походу окучивают хорошо все сайты, что на одном ипе огромной пачкой сидят.

Свой сервак, соседей нет, поднят новый домен третьего уровня, разверут сайт для демонстрации заказчику, через пару - тройку дней сайт в индексе.... все в истерике, сайт с реальным контентом....

Оказалось заказчик когда-то устанавливал всякую шнягу и его браузер был награждён разными барами... через бары и протекло.

Так что у меня железное правило - .htpasswd и сплю спокойно...

А вот по моим вопросам, Yesvik, что скажете:?

Дело в том что в первую очередь народ прикрывает дубли, а судьба страниц аккаунта мало кого интересует...

Как именно закрывать route=account роли не играет, поисковики по любому будут туда ломиться упираясь в страницу авторизации.

Ссылка на комментарий
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Войти

Уже зарегистрированы? Войдите здесь.

Войти сейчас
 Поделиться

  • Сейчас на странице   0 пользователей

    • Нет пользователей, просматривающих эту страницу.
×
×
  • Создать...

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.