Перейти к содержанию
cherkas

Sitemap - как единственный источник ссылок для поисковиков

Рекомендуемые сообщения

Здравствуйте, уважаемые форумчане. Подскажите как сделать, если возможно, что бы поисковики при передвижении по сайту, руководствовались только sitemap и сами по сайту где попало не лазали. У меня минимум по 2 разрешенных дубля, а то и по 3. Избавиться от них не получается, только ото всех ссылок сразу, но тогда индексировать вообще нечего будет. А в sitemap в самом хреновом случае дубли в ручную убрать можно, хотя их у меня и так там нету.

Спасибо.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Такой возможности нет.

1. Избавляйтесь от дублей.

2. Пользуйтесь rel="canonical"

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Гугл все равно пройдет и проиндексирует все даже с учетом роботс. Делайте канонические страницы.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Да я как раз избавляюсь от rel="canonical". Перечитал уже все темы на форуме по этому вопросу.

Я поставил ЧПУ и теперь ситуация следующая. Оригинальные ссылки не индексируются потому что запрещены robots.txt а ЧПУ ссылки не индексируются потому что они не канонические.

Получается у меня только категории индексируются. И как с этим бороться не знаю.

Может кто знает, можно ли как то влиять на rel="canonical"? Что бы он отображался у товара везде кроме непосредственно категории в которой товар находится, В дополнительных катерогиях, в поиске, на первой странице и т.д. - он был а в мой магазин/категория/категория/.../товар его не было.

Или что бы при любом переходе на товар, хоть с главной страницы хоть с поиска товар отображался не мой магазин/товар, а мой магазин/категория/категория/.../товар. (где то я на форуме видел такую тему, но по моему там решения не было).

Гугл все равно пройдет и проиндексирует все даже с учетом роботс. Делайте канонические страницы.

Гугл может и пройдет, я про него совсем мало знаю, а вот яндекс точно не проходит.

159 страниц - это категории и тексты (информация, ..условия соглашения и т.д.) ни одного товара! Все товары исключены роботом.

Я вот думаю уже, нафига этот ЧПУ нужен? Хотя и без него дубли будут.

post-26646-0-24984700-1364556519_thumb.jpg

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Еще есть вопрос. если включить .html в настройках>сервер этот html будет отображаться только у товаров или у категорий тоже? Как сделать что бы он отображался только у товаров?

Далее, можно ли в robots.txt как то прописать следующий запрет:

Допустим страница товара

http://мой_магазин/товар.html

и я запрещаю http://мой_магазин/*.html

но при этом http://мой_магазин/*/*.html - остается разрешенным, т.е. слеш "/" -есть границей ограничения (соответственно предварительно сделав так что бы html отражался только у товаров)

Во завернул!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Может стоит доверить сайт професионалам. Тут их достаточно. Обратитесь к кому нибудь, пусть настроят вам СЕО-про. В будущем вы хоть проблем не будете иметь с каноническими страницами.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Может стоит доверить сайт професионалам. Тут их достаточно. Обратитесь к кому нибудь, пусть настроят вам СЕО-про. В будущем вы хоть проблем не будете иметь с каноническими страницами.

Интерсно самому разобраться. Спасибо!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Доброго времени суток. Помогите разобраться с такой ситуацией:

Яндекс исключил из индекса почти 300 страниц, указав причину - НЕКАНОНИЧЕСКИЕ.

Но Канонических страниц в Индексе нет. То есть оригиналы в индекс не включены, а "дубли" исключены. Получается, что у меня страниц достаточно.

А роботы больше половины страниц отклонили.

Мне нужен программист, кто 1. Объяснит суть происходящего. 2. В случае необходимости настроит мой сайт так, чтобы индексация шла нормально.

 

За работу готов оплатить.

 

Пишите лично:

 

skype: danilabelovolskiy 
ICQ: 605071599
сотовый: +7 914 06 747 06
почта: danilabelovolskiy@inbox.ru

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Ага, именно с этим явлением я и боролся! Сейчас вроде бы начали по немногу добавляться страницы в индекс.

 

 

На сайте http://www.opencart.com - не помню где именно купил дополнение, которое при нажатии на товар выводит его в своей категории, при этом rel="canonical"  тоже показывает на товар в своей категории, ну и соответственно sitemap тоже показывает туда же.

 

Переписывался с поддержкой Яндекса, говорят что так должно всё нормально проиндексировать.

 

В приложении описание модуля, как точно он называется и где находится не помню, наткнулся на него случайно.

README.zip

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Гость
Вы комментируете как гость. Если у вас есть аккаунт, пожалуйста, войдите
Ответить в этой теме...

×   Вы вставили контент с форматированием.   Удалить форматирование

  Разрешено использовать не более 75 смайлов.

×   Ваша ссылка была автоматически встроена.   Отображать как обычную ссылку

×   Ваш предыдущий контент был восстановлен.   Очистить редактор

×   Вы не можете вставлять изображения напрямую. Загружайте или вставляйте изображения по ссылке.


  • Похожий контент

    • От VVPUt1n
      Всем привет!
       
      Знающие, подскажите пожалуйста!
      В sitemap есть страницы такого типа:
      https://site.ru/index.php?route=extension/d_blog_module/category&category_id=1
      https://site.ru/index.php?route=extension/d_blog_module/post&post_id=1
       
      Яндекс вебмастер и Гугл сич консоль выдал ошибку:
      Ошибка в XML
      Неизвестное имя в конструкции &XXX;. Возможно не выполнено экранирование символа &
       
      После чего я заменил & на & и получились ссылки вида:
      https://site.ru/index.php?route=extension/d_blog_module/category&category_id=1
      https://site.ru/index.php?route=extension/d_blog_module/post&post_id=1
       
      Запустил перепроверку, но ошибка осталась... облазил форумы, ничего не нашел. Кто нибудь знает что это за фак? Буду благодарен за любую инфу!
    • От buslikdrev
      1 250.00 руб · Срок продления: 200.00 руб за год
      Скачать/Купить дополнение


      Подкатегории / Линейка продукции для производителей
      Название модуля: Линейка продукции для производителей - "SubManufacturers"
      Версия модуля: 1.1
      Тип лицензии: Full (Полная версия)
      Тип установки: ocmod
      Язык: Беларуская мова, English, Русский язык, Українська мова
      Дата создания: 30.05.2017
      Дата обновления: 15.02.2018
      Был протестирован на: OpenCart.pro 2.1.0.2.2 и 2.3.0.2.3, OpenCart-"Русская сборка" 2.1.0.2 (rs1) и 2.3.0.2 (rs6), ocStore 2.1.0.2.1 и 2.3.0.2.3 - шаблон (default, Magazin, Revolution, Journal 2,3, Lightshop, Lightstore, Fractal)
      Название архива 1: SubManufacturers v1.0 Full OpenCart.pro 2.1.X.zip
      Название архива 2: SubManufacturers v1.1 Full OpenCart 2.X.zip
      Добавлен архив модуля: ManufacturerWall v1.1 Full OpenCart 2.X-3.0.X.zip
       
      При покупки более 1-ой лицензии, скидка50%
       
      ДЕМОНСТРАЦИЯ


      ОПИСАНИЕ
      Модификатор предназначен для добавления линейки (подкатегории) в производителях, а именно появится возможность разделить производителей на линейки выпускаемой ими продукции.
      Например, есть производитель Samsung, в стандартном модуле производителей будет выводиться такая продукция: телевизоры, микроволновые печи, электрочайники и т.д. Согласитесь, что как-то безобразно при переходе по нажатию на производителя в карточке товара теряться в каше другого товара, когда вас интересуют конкретно телевизоры. Благодаря этому модулю
      ваши покупатели не будут теряться в производителях и смогут быстрее подобрать себе товар. 

      ВНИМАНИЕ!
      Оригинальные файлы магазина не заменяет!
      Не забывайте делать бэкап базы данных на всякий случай.
      ДОБАВЛЕН В СОСТАВ МОДУЛЬ: Витрина производителей / ManufacrturerWall v1.1 - Он будет идти отдельным архивом, чтобы можно было на выбор ставить его или нет. Обновление двух модулей будут идти в ногу.
      С модулем Сео-оптимизация шаблона конфликтов в работе нет.
      Всегда проверяйте такие модули (окмоды - архивы) содержащие такие файлы: "install.php, install.sql" так как злоумышленники могут навредить вашему сайту, например, вашими руками удалят вашу базу данных.
      Пример запроса (смотрите, чтобы не было удаления таблиц "DROP TABLE": категорий, пользователей, товара и т.д. по оригиналу или всей БД "DROP DATABASE"):


      Модификатор "вносит изменения" в следующие файлы:
       
       
      УСЛОВИЯ СОГЛАШЕНИЯ
      - Beta версии устанавливаете на свой страх и риск - бэкап базы данных (далее - БД) обязателен;
      - Модуль (модификатор, дополнение, расширение, приложение) (далее - Модуль) можно устанавливать на 1 домен включая поддомены (одна покупка - один домен);
      - Редактировать код можно только под нужды своего магазина;
      - Распространение модуля запрещено;
      - Техническая поддержка (далее - ТП) осуществляется только при появлении ошибки, бага, глюка (зависания) и не совместимости модуля с заявленными версиями Opencart и шаблонов на момент продажи, при установке на боевой сайт (рабочий хостинг);
      - Адаптация модуля под другую версию Опенкарта, нестандартный шаблон и сторонние модули - платная;
      - Автор модуля оставляет за собой право в любое время внести изменение в настоящее условие, описание и исходный код модуля;
      - Автор модуля оставляет за собой право прекратить ТП пользователям по истечению 365 календарных дней со дня последнего обновления модуля (Full или Beta версии), или со дня окончания продления ТП, или при форс-мажорных обстоятельств;
      - ТП осуществляется при условии соблюдения данного соглашения, пишите в личные сообщения.

      Вопросы и пожелания можно задавать в данной теме.
      Добавил buslikdrev Добавлено 15.02.2018 Категория Серии, Комплекты Системные требования Сайт разработчика http://buslikdrev.by/ Старая цена Метод активации По запросу на почту Ioncube Loader Нет OpenCart 3.0
      2.3
      2.2
      2.1
      2.0 ocStore 3.0
      2.3
      2.2
      2.1 OpenCart.Pro, ocShop Opencart.pro 2.3
      Opencart.pro 2.1
      OcShop 2.0.3.х Обращение к серверу разработчика Нет
      Да  
    • От buslikdrev
      Название модуля: Линейка продукции для производителей - "SubManufacturers"
      Версия модуля: 1.1
      Тип лицензии: Full (Полная версия)
      Тип установки: ocmod
      Язык: Беларуская мова, English, Русский язык, Українська мова
      Дата создания: 30.05.2017
      Дата обновления: 15.02.2018
      Был протестирован на: OpenCart.pro 2.1.0.2.2 и 2.3.0.2.3, OpenCart-"Русская сборка" 2.1.0.2 (rs1) и 2.3.0.2 (rs6), ocStore 2.1.0.2.1 и 2.3.0.2.3 - шаблон (default, Magazin, Revolution, Journal 2,3, Lightshop, Lightstore, Fractal)
      Название архива 1: SubManufacturers v1.0 Full OpenCart.pro 2.1.X.zip
      Название архива 2: SubManufacturers v1.1 Full OpenCart 2.X.zip
      Добавлен архив модуля: ManufacturerWall v1.1 Full OpenCart 2.X-3.0.X.zip
       
      При покупки более 1-ой лицензии, скидка50%
       
      ДЕМОНСТРАЦИЯ


      ОПИСАНИЕ
      Модификатор предназначен для добавления линейки (подкатегории) в производителях, а именно появится возможность разделить производителей на линейки выпускаемой ими продукции.
      Например, есть производитель Samsung, в стандартном модуле производителей будет выводиться такая продукция: телевизоры, микроволновые печи, электрочайники и т.д. Согласитесь, что как-то безобразно при переходе по нажатию на производителя в карточке товара теряться в каше другого товара, когда вас интересуют конкретно телевизоры. Благодаря этому модулю
      ваши покупатели не будут теряться в производителях и смогут быстрее подобрать себе товар. 

      ВНИМАНИЕ!
      Оригинальные файлы магазина не заменяет!
      Не забывайте делать бэкап базы данных на всякий случай.
      ДОБАВЛЕН В СОСТАВ МОДУЛЬ: Витрина производителей / ManufacrturerWall v1.1 - Он будет идти отдельным архивом, чтобы можно было на выбор ставить его или нет. Обновление двух модулей будут идти в ногу.
      С модулем Сео-оптимизация шаблона конфликтов в работе нет.
      Всегда проверяйте такие модули (окмоды - архивы) содержащие такие файлы: "install.php, install.sql" так как злоумышленники могут навредить вашему сайту, например, вашими руками удалят вашу базу данных.
      Пример запроса (смотрите, чтобы не было удаления таблиц "DROP TABLE": категорий, пользователей, товара и т.д. по оригиналу или всей БД "DROP DATABASE"):


      Модификатор "вносит изменения" в следующие файлы:
       
       
      УСЛОВИЯ СОГЛАШЕНИЯ
      - Beta версии устанавливаете на свой страх и риск - бэкап базы данных (далее - БД) обязателен;
      - Модуль (модификатор, дополнение, расширение, приложение) (далее - Модуль) можно устанавливать на 1 домен включая поддомены (одна покупка - один домен);
      - Редактировать код можно только под нужды своего магазина;
      - Распространение модуля запрещено;
      - Техническая поддержка (далее - ТП) осуществляется только при появлении ошибки, бага, глюка (зависания) и не совместимости модуля с заявленными версиями Opencart и шаблонов на момент продажи, при установке на боевой сайт (рабочий хостинг);
      - Адаптация модуля под другую версию Опенкарта, нестандартный шаблон и сторонние модули - платная;
      - Автор модуля оставляет за собой право в любое время внести изменение в настоящее условие, описание и исходный код модуля;
      - Автор модуля оставляет за собой право прекратить ТП пользователям по истечению 365 календарных дней со дня последнего обновления модуля (Full или Beta версии), или со дня окончания продления ТП, или при форс-мажорных обстоятельств;
      - ТП осуществляется при условии соблюдения данного соглашения, пишите в личные сообщения.

      Вопросы и пожелания можно задавать в данной теме.
    • От Otvet
      Испытано на 2+ млн позиций. 100 тыс товаров в экспресс режиме за 1.5с

      Подробнее тут
       
      ! Внимание БОЛЬШИЕ цветные буквы не просто так в тексте
       Указывайте домен при покупке 
       
       
      Скоростная карта сайта. Является расширенной версией FX Sitemap Lite, входящего в состав Full IndeX
      Преимущества перед стандартным:
      ускоренная генерация благодаря собственной модели выборки товаров, категорий, инфостраниц, производителей (~ в 20-200 раз) заменяет оригинальный google_sitemap, сохраняя максимальную совместимость со сторонними модулями добавление lastmod (значительно ускоряет индексацию) устранение дублей товаров валидация яндексом фикс &amp при использовании seo_pro не патчит файлы (без vqmod/ocmod) мультисайтмап (сайтмап сайтмапов) Уникальные функции:
      возможность создать любое кол-во карт, с любым кол-вом товаров поддержка исключения любых страниц из карты списком express режим с заданием окончаний (для структуры сайт/товар) ultra режим с заданием окончаний (для структуры сайт/категория/товар) SEO страницы Mega Filter Pro функция сохранения в файл c заданием имени файла (можно повесить на cron) добавление списка страниц из файла улучшения мультиязычности новости с возможностью задать роут* блоги с возможностью задать роут* сохранение и автосохранение(при мульти) в файл{ы} с заданным именем возможность выдывать не динамический адрес а имена файлов в мультисайтмап SEO страницы OCFilter страницы SEO CMS Blog  
       
      Изображения
      В модуле присутствует функционал включения изображений в сайтмап, он 100% рабочий что неоднократно проверено. Данный функционал был востребован за всё время существования модуля в сумме 4-5 раз, но в каждом случае наблюдалось крайне странное и весьма неоднозначное поведение пользователей.
      В связи с этим дабы сберечь психику было принято решение об исключении данного функционала из бесплатной техподдержки.
      Так же обязательна к прочтению статья по данной теме
       
      ------------------
      * - поддерживаются таблицы blog/news/article/record
    • От Otvet
      300.00 руб
      Скачать/Купить дополнение


      #FX Sitemap - Сверхскоростная Карта сайта [xml]
      Испытано на 2+ млн позиций. 100 тыс товаров в экспресс режиме за 1.5с

      Подробнее тут
       
      ! Внимание БОЛЬШИЕ цветные буквы не просто так в тексте
       Указывайте домен при покупке 
       
       
      Скоростная карта сайта. Является расширенной версией FX Sitemap Lite, входящего в состав Full IndeX
      Преимущества перед стандартным:
      ускоренная генерация благодаря собственной модели выборки товаров, категорий, инфостраниц, производителей (~ в 20-200 раз) заменяет оригинальный google_sitemap, сохраняя максимальную совместимость со сторонними модулями добавление lastmod (значительно ускоряет индексацию) устранение дублей товаров валидация яндексом фикс &amp при использовании seo_pro не патчит файлы (без vqmod/ocmod) мультисайтмап (сайтмап сайтмапов) Уникальные функции:
      возможность создать любое кол-во карт, с любым кол-вом товаров поддержка исключения любых страниц из карты списком express режим с заданием окончаний (для структуры сайт/товар) ultra режим с заданием окончаний (для структуры сайт/категория/товар) SEO страницы Mega Filter Pro функция сохранения в файл c заданием имени файла (можно повесить на cron) добавление списка страниц из файла улучшения мультиязычности новости с возможностью задать роут* блоги с возможностью задать роут* сохранение и автосохранение(при мульти) в файл{ы} с заданным именем возможность выдывать не динамический адрес а имена файлов в мультисайтмап SEO страницы OCFilter страницы SEO CMS Blog  
       
      Изображения
      В модуле присутствует функционал включения изображений в сайтмап, он 100% рабочий что неоднократно проверено. Данный функционал был востребован за всё время существования модуля в сумме 4-5 раз, но в каждом случае наблюдалось крайне странное и весьма неоднозначное поведение пользователей.
      В связи с этим дабы сберечь психику было принято решение об исключении данного функционала из бесплатной техподдержки.
      Так же обязательна к прочтению статья по данной теме
       
      ------------------
      * - поддерживаются таблицы blog/news/article/record
      Добавил Otvet Добавлено 22.03.2016 Категория SEO, карта сайта, оптимизация Системные требования Сайт разработчика http://full-index.ru/sitemap/ Старая цена Метод активации Автоматическая активация Ioncube Loader Нет OpenCart 3.0
      2.3
      2.2
      2.1
      2.0
      1.5.6.4
      1.5.6.3
      1.5.6.2
      1.5.6.1
      1.5.6
      1.5.5.1
      1.5.5
      1.5.4.1
      1.5.3.1 ocStore 3.0
      2.3
      2.2
      2.1
      1.5.5.1.2
      1.5.5.1.1
      1.5.5.1
      1.5.4.1.2
      1.5.4.1.1
      1.5.4.1
      1.5.3.1
      1.5.2.1
      1.5.1.3 OpenCart.Pro, ocShop Opencart.pro 2.3
      Opencart.pro 2.1
      OcShop 2.0.3.х
      OcShop 1.5.6.4.х Обращение к серверу разработчика Нет  
  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу

×

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.