Jump to content
Search In
  • More options...
Find results that contain...
Find results in...
  • Sign Up

Sitemap - как единственный источник ссылок для поисковиков


Recommended Posts

Здравствуйте, уважаемые форумчане. Подскажите как сделать, если возможно, что бы поисковики при передвижении по сайту, руководствовались только sitemap и сами по сайту где попало не лазали. У меня минимум по 2 разрешенных дубля, а то и по 3. Избавиться от них не получается, только ото всех ссылок сразу, но тогда индексировать вообще нечего будет. А в sitemap в самом хреновом случае дубли в ручную убрать можно, хотя их у меня и так там нету.

Спасибо.

Link to post
Share on other sites

Такой возможности нет.

1. Избавляйтесь от дублей.

2. Пользуйтесь rel="canonical"

Link to post
Share on other sites

Гугл все равно пройдет и проиндексирует все даже с учетом роботс. Делайте канонические страницы.

Link to post
Share on other sites

Да я как раз избавляюсь от rel="canonical". Перечитал уже все темы на форуме по этому вопросу.

Я поставил ЧПУ и теперь ситуация следующая. Оригинальные ссылки не индексируются потому что запрещены robots.txt а ЧПУ ссылки не индексируются потому что они не канонические.

Получается у меня только категории индексируются. И как с этим бороться не знаю.

Может кто знает, можно ли как то влиять на rel="canonical"? Что бы он отображался у товара везде кроме непосредственно категории в которой товар находится, В дополнительных катерогиях, в поиске, на первой странице и т.д. - он был а в мой магазин/категория/категория/.../товар его не было.

Или что бы при любом переходе на товар, хоть с главной страницы хоть с поиска товар отображался не мой магазин/товар, а мой магазин/категория/категория/.../товар. (где то я на форуме видел такую тему, но по моему там решения не было).

Гугл все равно пройдет и проиндексирует все даже с учетом роботс. Делайте канонические страницы.

Гугл может и пройдет, я про него совсем мало знаю, а вот яндекс точно не проходит.

159 страниц - это категории и тексты (информация, ..условия соглашения и т.д.) ни одного товара! Все товары исключены роботом.

Я вот думаю уже, нафига этот ЧПУ нужен? Хотя и без него дубли будут.

post-26646-0-24984700-1364556519_thumb.jpg

Link to post
Share on other sites

Еще есть вопрос. если включить .html в настройках>сервер этот html будет отображаться только у товаров или у категорий тоже? Как сделать что бы он отображался только у товаров?

Далее, можно ли в robots.txt как то прописать следующий запрет:

Допустим страница товара

http://мой_магазин/товар.html

и я запрещаю http://мой_магазин/*.html

но при этом http://мой_магазин/*/*.html - остается разрешенным, т.е. слеш "/" -есть границей ограничения (соответственно предварительно сделав так что бы html отражался только у товаров)

Во завернул!

Link to post
Share on other sites

Может стоит доверить сайт професионалам. Тут их достаточно. Обратитесь к кому нибудь, пусть настроят вам СЕО-про. В будущем вы хоть проблем не будете иметь с каноническими страницами.

Link to post
Share on other sites

Может стоит доверить сайт професионалам. Тут их достаточно. Обратитесь к кому нибудь, пусть настроят вам СЕО-про. В будущем вы хоть проблем не будете иметь с каноническими страницами.

Интерсно самому разобраться. Спасибо!

Link to post
Share on other sites
  • 3 weeks later...

Доброго времени суток. Помогите разобраться с такой ситуацией:

Яндекс исключил из индекса почти 300 страниц, указав причину - НЕКАНОНИЧЕСКИЕ.

Но Канонических страниц в Индексе нет. То есть оригиналы в индекс не включены, а "дубли" исключены. Получается, что у меня страниц достаточно.

А роботы больше половины страниц отклонили.

Мне нужен программист, кто 1. Объяснит суть происходящего. 2. В случае необходимости настроит мой сайт так, чтобы индексация шла нормально.

 

За работу готов оплатить.

 

Пишите лично:

 

skype: danilabelovolskiy 
ICQ: 605071599
сотовый: +7 914 06 747 06
почта: danilabelovolskiy@inbox.ru
Link to post
Share on other sites

Ага, именно с этим явлением я и боролся! Сейчас вроде бы начали по немногу добавляться страницы в индекс.

 

 

На сайте http://www.opencart.com - не помню где именно купил дополнение, которое при нажатии на товар выводит его в своей категории, при этом rel="canonical"  тоже показывает на товар в своей категории, ну и соответственно sitemap тоже показывает туда же.

 

Переписывался с поддержкой Яндекса, говорят что так должно всё нормально проиндексировать.

 

В приложении описание модуля, как точно он называется и где находится не помню, наткнулся на него случайно.

README.zip

Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
  • Similar Content

    • By legioner26
      899
      Доступ к обновлениям: 500.00 руб за 12 месяцев
      Скачать/Купить дополнение


      SEO Генератор мета тегов (категории, товары, производители, статьи), SEO URL - Мультиязык
      Модуль SEO генератор мета описания(тегов), URL, дубли,  позволяет провести оптимизацию всех категорий и товаров (Берутся категории у которых есть товары), производителей, статей с поддержкой языков магазина. Очень прост в эксплуатации
      Сохраняет информацию о заполнении проставляя метки, также предусмотреть функционал для перезаписи. 
      Все что от Вас требуется, это задать шаблон для заполнения meta.
       
      Если необходимо убрать нули после запятой то читаем FAQ
      Внедрен Мультиязык производящий генерацию метатегов и URL, а также поиск дублей на всех подключенных языках магазина !!!
       
      Также добавлена возможность автоматической массовой генерации отсутствующих SEO URL в товарах, категориях, производителях и статьях на всех языках магазина, с доп функционалом перезаписи имеющихся.
      при нажатии на кнопку Обновить ЧПУ (SEO URL)  модуль проставить URL во всех товарах и категориях, производителях, статьях в которых они отсутствуют.
       
      Возможность устранения дублей SEO URL
       
      ПРИМЕР заполнения прилагается в скриншоте.
       
      УСТАНОВКА
      1. Для ОС 3 --- Установить архив через Установку расширений, очистить кешь.
      2. Для ОС 2 --- Скопировать папку admin в корень сайта.
       
      ПРИМЕЧАНИЕ
      Модуль не закублен с открытым исходным кодом, не требует ключа активации.
      Тех. поддержка осуществляется для клиентов купившим модуль для конкретного ресурса, поэтому при покупке обязательно указываем Ваш домен.
       

       
      СЕО СОПРОВОЖДЕНИЕ <<<
       
      РЕКОМЕНДУЕМЫЕ МОДУЛИ
       
      Генератор АКЦИЙ Special PRO
      Смс авторизация и регистрация 
      Модуль Зумма
      Модуль подарков
      Конструктор форм обратной связи
      ___________________
       
      Также советую приобрести модуль от разработчика @chukcha Редирект Универсал 
      Незаменимый инструмент для редиректов, имеется 410 жизненно важный для удаленных товаров.
       
      Добавил legioner26 Добавлено 31.03.2019 Категория SEO, карта сайта, оптимизация Системные требования Метод активации Без активации Ioncube Loader Нет OpenCart 3.0
      2.3
      2.2
      2.1
      2.0 ocStore 3.0
      2.3.0.2.4
      2.3
      2.2
      2.1 OpenCart.Pro, ocShop Opencart.pro 2.3
      Opencart.pro 2.1 Обращение к серверу разработчика Нет  
    • By legioner26
      Модуль SEO генератор мета описания(тегов), URL, дубли,  позволяет провести оптимизацию всех категорий и товаров (Берутся категории у которых есть товары), производителей, статей с поддержкой языков магазина. Очень прост в эксплуатации
      Сохраняет информацию о заполнении проставляя метки, также предусмотреть функционал для перезаписи. 
      Все что от Вас требуется, это задать шаблон для заполнения meta.
       
      Если необходимо убрать нули после запятой то читаем FAQ
      Внедрен Мультиязык производящий генерацию метатегов и URL, а также поиск дублей на всех подключенных языках магазина !!!
       
      Также добавлена возможность автоматической массовой генерации отсутствующих SEO URL в товарах, категориях, производителях и статьях на всех языках магазина, с доп функционалом перезаписи имеющихся.
      при нажатии на кнопку Обновить ЧПУ (SEO URL)  модуль проставить URL во всех товарах и категориях, производителях, статьях в которых они отсутствуют.
       
      Возможность устранения дублей SEO URL
       
      ПРИМЕР заполнения прилагается в скриншоте.
       
      УСТАНОВКА
      1. Для ОС 3 --- Установить архив через Установку расширений, очистить кешь.
      2. Для ОС 2 --- Скопировать папку admin в корень сайта.
       
      ПРИМЕЧАНИЕ
      Модуль не закублен с открытым исходным кодом, не требует ключа активации.
      Тех. поддержка осуществляется для клиентов купившим модуль для конкретного ресурса, поэтому при покупке обязательно указываем Ваш домен.
       

       
      СЕО СОПРОВОЖДЕНИЕ <<<
       
      РЕКОМЕНДУЕМЫЕ МОДУЛИ
       
      Генератор АКЦИЙ Special PRO
      Смс авторизация и регистрация 
      Модуль Зумма
      Модуль подарков
      Конструктор форм обратной связи
      ___________________
       
      Также советую приобрести модуль от разработчика @chukcha Редирект Универсал 
      Незаменимый инструмент для редиректов, имеется 410 жизненно важный для удаленных товаров.
       
    • By Otvet
      Работает на живых магазинах с 2.5 млн позиций, если у вас больше - точно так же будет работать.
       
      ! Внимание БОЛЬШИЕ цветные буквы не просто так в тексте
       Указывайте домен при покупке 
       
      Статус Не получено – не удалось получить файл Sitemap больше не страшен т.к. есть патч ЧПУ адреса сайтмапа в 2 клика
       
       
      У доменов .рф проблемы с приемом Гуглом любого сайтмапа, когда гугл исправит ошибку неизвестно
       
      C посадочными OCFilter 4.8 модуль не работает, не включайте в настройках.
       
      Преимущества:
      ускоренная генерация благодаря собственной модели выборки товаров, категорий, инфостраниц, производителей (~ в 20-200 раз) может заменять оригинальный google_sitemap (до версии 4.0), сохраняя максимальную совместимость со сторонними модулями, работа производится полностью так, как будто стоит родной, с версии 4.0 модуль не заменяет, имеет собственный контроллер и админку добавление lastmod (значительно ускоряет индексацию) в отличии от рудиментов priority и changefreq устранение дублей товаров в содержании валидация яндексом фикс &amp при использовании seo_pro (error on line 1 at column ....: EntityRef: expecting) мультисайтмап (сайтмап сайтмапов)  
      Уникальные функции:
      возможность создать любое кол-во карт, с любым кол-вом товаров поддержка исключения любых страниц из карты списком express режим с заданием окончаний (для структуры сайт/товар) ultra режим с заданием окончаний (для структуры сайт/категория/товар) функция сохранения в файл c заданием имени файла (можно повесить на cron) добавление списка страниц из файла улучшения мультиязычности новости с возможностью задать роут* блоги с возможностью задать роут* сохранение и автосохранение(при мульти) в файл{ы} с заданным именем возможность выдывать не динамический адрес а имена файлов в мультисайтмап SEO страницы Mega Filter Pro SEO страницы OCFilter (до версии 4.7.*) SEO страницы Filter Vier (не гарантируется, т.к. там бесконечные переделки и ioncube) страницы SEO CMS Blog исключение страниц при использовании модуля HYPER PRODUCT MODELS (обновить сайтмап до последней версии) #FX Brands логирование обращений ботов Яндекс/Гугл/... пересчет даты модификации категории (lastmod) исходя их свежей даты последней модификации товаров данной категории  
       
      Изображения
      В модуле присутствует функционал включения изображений в сайтмап, он 100% рабочий что неоднократно проверено. Данный функционал был востребован за всё время существования модуля в сумме 4-5 раз, но в каждом случае наблюдалось крайне странное и весьма неоднозначное поведение пользователей.
      В связи с этим, дабы сберечь психику было принято решение об исключении данного функционала из бесплатной техподдержки.
      Так же обязательна к прочтению статья по данной теме
       
      ------------------
      * - поддерживаются таблицы БД blog/news/article (в т.ч. ocstore3 blog)
      по запросу патч для: 
      newsblog revolution blog lightshop blog unishop blog journal3 blog octemplates blog technics_blog airdus blog в любой момент авторы в сторонние блоги могут внести изменения и поддержка исчезнуть
       
      ------------------
      Важно:
      Срок бесплатной технической поддержки - 1 год Локальные серверы и прочее не входит в поддержку Техподдержка, обновление на одну версию опенкарт При заказе настройки, учитывайте что она должна производиться на полностью готовом сайте, дабы потом не делать заново
    • By Otvet
      750 11
      Скачать/Купить дополнение


      #FX Sitemap - Сверхскоростная Карта сайта [xml] с широким функционалом
      Работает на живых магазинах с 2.5 млн позиций, если у вас больше - точно так же будет работать.
       
      ! Внимание БОЛЬШИЕ цветные буквы не просто так в тексте
       Указывайте домен при покупке 
       
      Статус Не получено – не удалось получить файл Sitemap больше не страшен т.к. есть патч ЧПУ адреса сайтмапа в 2 клика
       
       
      У доменов .рф проблемы с приемом Гуглом любого сайтмапа, когда гугл исправит ошибку неизвестно
       
      C посадочными OCFilter 4.8 модуль не работает, не включайте в настройках.
       
      Преимущества:
      ускоренная генерация благодаря собственной модели выборки товаров, категорий, инфостраниц, производителей (~ в 20-200 раз) может заменять оригинальный google_sitemap (до версии 4.0), сохраняя максимальную совместимость со сторонними модулями, работа производится полностью так, как будто стоит родной, с версии 4.0 модуль не заменяет, имеет собственный контроллер и админку добавление lastmod (значительно ускоряет индексацию) в отличии от рудиментов priority и changefreq устранение дублей товаров в содержании валидация яндексом фикс &amp при использовании seo_pro (error on line 1 at column ....: EntityRef: expecting) мультисайтмап (сайтмап сайтмапов)  
      Уникальные функции:
      возможность создать любое кол-во карт, с любым кол-вом товаров поддержка исключения любых страниц из карты списком express режим с заданием окончаний (для структуры сайт/товар) ultra режим с заданием окончаний (для структуры сайт/категория/товар) функция сохранения в файл c заданием имени файла (можно повесить на cron) добавление списка страниц из файла улучшения мультиязычности новости с возможностью задать роут* блоги с возможностью задать роут* сохранение и автосохранение(при мульти) в файл{ы} с заданным именем возможность выдывать не динамический адрес а имена файлов в мультисайтмап SEO страницы Mega Filter Pro SEO страницы OCFilter (до версии 4.7.*) SEO страницы Filter Vier (не гарантируется, т.к. там бесконечные переделки и ioncube) страницы SEO CMS Blog исключение страниц при использовании модуля HYPER PRODUCT MODELS (обновить сайтмап до последней версии) #FX Brands логирование обращений ботов Яндекс/Гугл/... пересчет даты модификации категории (lastmod) исходя их свежей даты последней модификации товаров данной категории  
       
      Изображения
      В модуле присутствует функционал включения изображений в сайтмап, он 100% рабочий что неоднократно проверено. Данный функционал был востребован за всё время существования модуля в сумме 4-5 раз, но в каждом случае наблюдалось крайне странное и весьма неоднозначное поведение пользователей.
      В связи с этим, дабы сберечь психику было принято решение об исключении данного функционала из бесплатной техподдержки.
      Так же обязательна к прочтению статья по данной теме
       
      ------------------
      * - поддерживаются таблицы БД blog/news/article (в т.ч. ocstore3 blog)
      по запросу патч для: 
      newsblog revolution blog lightshop blog unishop blog journal3 blog octemplates blog technics_blog airdus blog в любой момент авторы в сторонние блоги могут внести изменения и поддержка исчезнуть
       
      ------------------
      Важно:
      Срок бесплатной технической поддержки - 1 год Локальные серверы и прочее не входит в поддержку Техподдержка, обновление на одну версию опенкарт При заказе настройки, учитывайте что она должна производиться на полностью готовом сайте, дабы потом не делать заново Добавил Otvet Добавлено 22.03.2016 Категория SEO, карта сайта, оптимизация Системные требования умение читать инструкцию, IQ > 70 Метод активации Автоматическая активация Ioncube Loader Нет OpenCart 3.0
      2.3
      2.2
      2.1
      2.0
      1.5.6.4
      1.5.6.3
      1.5.6.2
      1.5.6.1
      1.5.6
      1.5.5.1
      1.5.5
      1.5.4.1
      1.5.3.1 ocStore 3.0
      2.3.0.2.4
      2.3
      2.2
      2.1
      1.5.5.1.2
      1.5.5.1.1
      1.5.5.1
      1.5.4.1.2 OpenCart.Pro, ocShop Opencart.pro 2.3
      Opencart.pro 2.1
      OcShop 2.0.3.х
      OcShop 1.5.6.4.х Обращение к серверу разработчика Нет  
    • By SirGrey
      750 10
      Скачать/Купить дополнение


      Sitemap для изображений
      Согласно рекомендациям Google для сайта в дополнение к основному файл sitemap можно добавить отдельный файл с изображениями.
      https://developers.google.com/search/docs/advanced/sitemaps/image-sitemaps
       
      Модуль формирует sitemap по товарам, в котором перечисляет входящие в них изображения (основное и дополнительные)
      Это поможет Google найти на вашем сайте изображения и быстрее их индексировать.
       

      Добавил SirGrey Добавлено 23.11.2021 Категория SEO, карта сайта, оптимизация Системные требования Метод активации Без активации Ioncube Loader Нет OpenCart 3.0
      2.3
      2.2
      2.1
      2.0 ocStore 3.0
      2.3.0.2.4
      2.3
      2.2
      2.1 OpenCart.Pro, ocShop Не проверялось Обращение к серверу разработчика Нет  
  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.