[robots.txt] Категории не индексируются поисковиками

[Maria7272]

Добрый день!

У меня прогрузилась только главная страница, остальные страницы в поиске в яндексе и гугле не видны. В чем может быть дело?

[snastik]

Сайт покажите.

[Maria7272]

semerka7.ru   Он у меня сыроватый, но давно весит, а странички с товарами не выходят в поиске.

[chukcha]

а скажите, как роботу пробиться к товарам через это?

Disallow: /index.php?route=product/category

[Maria7272]

Простите,я в этом не очень понимаю. Что-то с категориями? Нужно код поправить?

[maxpostal]

Вам нужно правильно составить файл robots.txs находящийся в корне сайта.

[Maria7272]

а как туда залезть? Нужно на хостинг идти и там найти  robots.txs?

[polarnik]

Да, он в корне магазина. Замените его на стандартный из дистрибутива движка

[chukcha]

Обратитесь к тому, кто вам прописал такой robots.txt

[Maria7272]

А из админки нельзя robots.txs поменять?

[Uza10775]

А из админки нельзя robots.txs поменять?

установите себе программу Filezilla, с ее помощью вы сможете открывать все документы и править код, нужно только прописать будет доступ FTP (создается на хостинге). Для открытия документов можно использовать Notepad. robots поменять либо прямо на хостинге, либо через открытие в файлзилле

[Maria7272]

Спасибо. Вот нашла код robots из дистрибутива. Подскажите, нужно ли мне что-то прописывать еще сюда?

 

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=


User-agent: Yandex
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Clean-param: tracking

Змінено 31 серпня 2014 користувачем AlexFisher
code

[maxpostal]

Допишите свой хост для Яндекса, только без пустых строк:

Host: semerka7.ru

перед

Clean-param: tracking

Карта сайта и остальное по желанию...

 

https://www.google.ru/?gfe_rd=cr&ei=Rwj_U7nJLMzBNM_5gIAF#newwindow=1&q=robots.txt+%D0%B4%D0%BB%D1%8F+opencart

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

[Maria7272]

Спасбо большое, а то я как свинья в апельсинах. Вот если я такой оставлю, у меня будут индексироваться остальные страницы, а не только главная.

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=


User-agent: Yandex
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Host: semerka7.ru
Clean-param: tracking

Змінено 31 серпня 2014 користувачем AlexFisher
spoiler, code

[Uza10775]

Допишите свой хост для Яндекса, только без пустых строк:

Host: semerka7.ru

перед

Clean-param: tracking

Карта сайта и остальное по желанию...

 

https://www.google.ru/?gfe_rd=cr&ei=Rwj_U7nJLMzBNM_5gIAF#newwindow=1&q=robots.txt+%D0%B4%D0%BB%D1%8F+opencart

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

а есть разница в том, стоит хост перед Clean-param: tracking или после него?

у меня так:

Clean-param: tracking

Crawl-delay: 5

Host: millypolly.ru

Это же нормально? что-то меняется от смены позиций в данном случае?

[Uza10775]

 

Спасбо большое, а то я как свинья в апельсинах. Вот если я такой оставлю, у меня будут индексироваться остальные страницы, а не только главная.

 

должны :wink:  у меня такой же...

[chukcha]

а есть разница в том, стоит хост перед Clean-param: tracking или после него?

у меня так:

Clean-param: tracking

Crawl-delay: 5

Host: millypolly.ru

Это же нормально? что-то меняется от смены позиций в данном случае?

Об этом лучше спрашивать у тех, кто это использует

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#host

[Maria7272]

 В Яндекс.Вебмастер в анализе robots.txt. У меня выходит в используемых секциях, вот это. Это нормально?

 

• Используемые секции

  Строка       26-49

User-agent: Yandex

Disallow: /*route=account/

...

Clean-param: tracking

   

[maxpostal]

 

 В Яндекс.Вебмастер в анализе robots.txt. У меня выходит в используемых секциях, вот это. Это нормально?

 

• Используемые секции

  Строка       26-49

User-agent: Yandex

Disallow: /*route=account/

...

Clean-param: tracking

   

 

 

Это здорово, Яндекс использует все назначенные ему директивы.

[Maria7272]

Спасибо, успокоили :-) . Но меня пугает, что загруженно яндексом 117 страниц, а в поиске только 12. 

[MrGadfly]

Спасибо, успокоили :-) . Но меня пугает, что загруженно яндексом 117 страниц, а в поиске только 12. 

Почитайте мануал яндекса. Он выдает в поиске только те страницы, которые кажутся ему интересными. На странице товаров у вас есть характеристики, в общем какой то контент. Что интересного на странице категорий? Напишите туда уникальный, полезный пользователям текст, прогоните страницы категорий по аддурилкам и будет вам счастье. Не моментально, конечно, но будет:)

[Maria7272]

Почитайте мануал яндекса. Он выдает в поиске только те страницы, которые кажутся ему интересными. На странице товаров у вас есть характеристики, в общем какой то контент. Что интересного на странице категорий? Напишите туда уникальный, полезный пользователям текст, прогоните страницы категорий по аддурилкам и будет вам счастье. Не моментально, конечно, но будет :)

Спасибо) а как категорию описать, сообразить технически не могу, куда зайти.

[Uza10775]

Спасибо) а как категорию описать, сообразить технически не могу, куда зайти.

через админ панель. когда создаете категорию, там целое поле для описаний))) так и называется: описание. текст, картинки, видео , если надо-все туда...