Гугл не индексирует товары! "Обнаружена, не проиндексирована"

[bot002]

Доброго времени суток.

Подскажите, где копать проблему и как ее решить?

Сайт не молодой, уже года 3-4

давно не занимались анализом сео и т.п.

Сейчас решил заглянуть, что там делается...

Сайт shmotie.com  . Продажа одежды. На сайте более 2000 позиций. Все добавляли сами, все текста уникальны (если можно так сказать. Не скопированы не где точно)

карта сайта http://shmotie.com/index.php?route=feed/fast_sitemap

В общем, из всей ситуации могу сказать, что из всех отсканированных страниц индексируются лишь малая часть.

 

Еще такой вопрос, могло ли повлиять то, что после добавления на сайт в течении пары дней позиции менеджер дублирует на наш аккаунт в shafa.ua .

Может ли тот сайт перебивать наш контент, и наш сайт отправляет в мусорку? (хотя наш контент появляется на несколько дней раньше)

 

Вот скрины с сеч консоли

[Zetx]

1. попробуйте вручную отправить несколько страниц, так сказать, чтоб напомнить роботу про свой сайт...

 

 

2.

проверьте есть ли у вас в карте хмл теги:

lastmod - дата последнего изменения документа
changefreq - частота изменения страницы

 

если нет, то укажите их...

[zlob]

У вас как минимум сайт отдается и с www и без www, и с http и с https

Робот может сканировать каждую страницу в 4 разных вариантах

 

Поэтому столько исключенных страниц

 

Добавьте редиректы и поставьте ssl, он сейчас у всех хостеров бесплатный

 

[zlob]

+ в роботсе нет ссылки на сайт мап

В вебмастере и серч консоли добавляли?

[MaratSeo]

Все версии сайта просматривали? Возможна индексация на разных адресах сайтах

[bot002]

Всем спасибо. Проделал практически все, что советовали выше. Будем ждать результат.

[bot002]

В общем, сделал много чего но все таки страницы падают и падают в индексации. Уже осталось 400+

[optimlab]

@bot002 Скобки уберите из URL

[bot002]

48 минут назад, optimlab сказал:

@bot002 Скобки уберите из URL

Ух. Не подумал.

Но проверил "проиндексированные страницы", там процентов 20-30 со скобками...

А можно как-то массово убрать скобки? Или каждую страницу править отдельно надо?

[GreyPV]

Думается мне, что массово только с СЕОпро, (в моем случае шаблон поддерживает массовое изменение урлов, ну и с помощью АОП тоже можно) если сайт новый то не страшно, а если вы год уже существуете, считайте что все заново. 

Спецы поправят

[bot002]

та сайту уже года 4.

Причем раньше скобки в урлах совершенно не мешали

Змінено 4 лютого 2019 користувачем bot002

[optimlab]

@bot002 Однако присмотрелся..

Сайт у вас трешовый.

Особенно вот такие перлы:

<div class="cart">
<class='button' style='color:black; font-weight: 700;'>Нет в наличии</a>      
</div>

 

Или такие:

• sort
• Левая скобка - около 100-150 в индексе
• filter
• Всего страниц в индексе

А это по всей видимости результаты необдуманного включения СЕО-ПРО:

• Было - Станет
• Отсутствует..(((

 

3 часа назад, bot002 сказал:

А можно как-то массово убрать скобки?

UPDATE `oc_seo_url` SET `keyword` = REPLACE(`keyword`, '%28', ''); - удалить левую скобку
UPDATE `oc_seo_url` SET `keyword` = REPLACE(`keyword`, '%29', ''); - удалить правую скобку

 

Следующий вопрос у вас должен быть: "Подскажите правило для .htaccess как мне все старые урл со скобками сделать 301 редирект на новые без скобок".

[bot002]

3 часа назад, optimlab сказал:

@bot002 Однако присмотрелся..

Сайт у вас трешовый.

Особенно вот такие перлы:

<div class="cart">
<class='button' style='color:black; font-weight: 700;'>Нет в наличии</a>      
</div>

 

Или такие:

• sort
• Левая скобка - около 100-150 в индексе
• filter
• Всего страниц в индексе

А это по всей видимости результаты необдуманного включения СЕО-ПРО:

• Было - Станет
• Отсутствует..(((

 

UPDATE `oc_seo_url` SET `keyword` = REPLACE(`keyword`, '%28', ''); - удалить левую скобку
UPDATE `oc_seo_url` SET `keyword` = REPLACE(`keyword`, '%29', ''); - удалить правую скобку

 

Следующий вопрос у вас должен быть: "Подскажите правило для .htaccess как мне все старые урл со скобками сделать 301 редирект на новые без скобок".

Честно сказать, я вообще офигел) Сеопро настройки чпу не трогал уже пару лет.

Я нихрена не пойму с чего начать и что делать)

Вроде все просто, но как-то очень сложно.

Просто у меня второй сайт с такими же настройками, и вроде бы проблем нет. Все индексируется, все работает. ukrcoins.com.ua . В декабре перебрался с джумлы на остор. Сделал редирект с www и неделю назад переехал на https . Вроде бы все норм по индексации.

 

А вот с этим сайтом хз с чего начать.

Змінено 4 лютого 2019 користувачем bot002

[bot002]

странно, почему индексируются эти страницы, если в роботсе вроде отключал...

Спойлер

User-agent: Googlebot
Allow: /index.php?route=feed/fast_sitemap
Allow: /index.php?route=information/news
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /admin
Disallow: /download
Disallow: /system
Disallow: /vqmod
Disallow: /*sort
Disallow: /*order
Disallow: /*limit
Disallow: /*filter
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /index.php?route=checkout/simplecheckout
Disallow: /index.php?route=account/simpleregister
Disallow: /cart/
Disallow: /login/
Disallow: /forgot-password/
Disallow: /password-recovery
Disallow: /request-return/
Disallow: /compare-products/
Allow: /catalog/view/javascript/jquery/colorbox/images/
Allow: /odejda-dlya-jenschin/

User-agent: Yandex
Allow: /index.php?route=feed/fast_sitemap
Allow: /index.php?route=information/news
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Host: shmotie.com

 

Змінено 4 лютого 2019 користувачем bot002

[upsound]

Доброго дня.

 

Заранее прошу прощения у автора. Похожая проблема, не создавал дубли, но скорее всего диагноз другой.

Есть следующая ситуация:

При этом в файле сайтмап всего около 8200 страниц, которые успешно проиндексированы. Из этих 9,14 тыс страниц 1,4 тыс находятся в сайтмап, остальные же туда не попали. Вопрос, не корректный сайт мап?

[vadimkhayru]

 

аналогично... не знаю что уже делать, сайт futulight.ru

[webzepa]

У меня похожая проблема, только не индексирует несколько страниц подкатегорий основных разделов

Вот например https://fashion-ua.com.ua/muzhskie-kurtki-bombery в сайтмепе уже 3 месяца, но гугл ее почему то не видит.

Может ли стоять запрет на определенные страницы?

[5976]

Такая же проблема 2000 страниц Обнаружена, не проиндексирована 

сайт https://www.owoxe.com/bed_linen

Кто знает решение?

[kulinenko]

23 часа назад, 5976 сказал:

Такая же проблема 2000 страниц Обнаружена, не проиндексирована 

сайт https://www.owoxe.com/bed_linen

Кто знает решение?

решение простое - проверяем техничку - если все ок - то уник тексты и/или ссылки

[niger]

В 21.07.2021 в 00:38, 5976 сказал:

Такая же проблема 2000 страниц Обнаружена, не проиндексирована 

сайт https://www.owoxe.com/bed_linen

Кто знает решение?

А проблема то в чем? в роботс.тхт это страница исключена. но у вас нет редиректа с этих страницы на правильные страницы с красивыми ссылками из сайт_мапа. А мог бы вообще Гугл за дубли посчитать и был бы прав. 

[kulinenko]

13 часов назад, niger сказал:

А проблема то в чем? в роботс.тхт это страница исключена. но у вас нет редиректа с этих страницы на правильные страницы с красивыми ссылками из сайт_мапа. А мог бы вообще Гугл за дубли посчитать и был бы прав. 

там кроме роботса уже все очень плохо

https://prnt.sc/1ed5zoi

 

на сайте нету ни чпу , за тексты уже панда наверное , и да роботс влеплен левый с яндексом , и закрыты товары в нем

и ссылки на товары кривые в листинге - ведут на страницы НЕКАНОНИЧЕСКИЕ ,а канон закрыт в роботсе )))

 

если честно то такой сайт надо закрыть, сделать и потом только открывать, а сеошнику руки оторвать за такое

[niger]

8 часов назад, kulinenko сказал:

там кроме роботса уже все очень плохо

https://prnt.sc/1ed5zoi

 

на сайте нету ни чпу , за тексты уже панда наверное , и да роботс влеплен левый с яндексом , и закрыты товары в нем

и ссылки на товары кривые в листинге - ведут на страницы НЕКАНОНИЧЕСКИЕ ,а канон закрыт в роботсе )))

 

если честно то такой сайт надо закрыть, сделать и потом только открывать, а сеошнику руки оторвать за такое

Может это и есть СЕОшник этого сайта) 

[kulinenko]

10 часов назад, niger сказал:

Может это и есть СЕОшник этого сайта) 

сомневаюсь, сеоспец такого не допустит, это владелец и какойто урод ему посоветовал сделать дор на сайте, сайт наверное уже в фильтре , при чем надолго

[Shureg]

6 часов назад, kulinenko сказал:

сомневаюсь, сеоспец такого не допустит, это владелец и какойто урод ему посоветовал сделать дор на сайте, сайт наверное уже в фильтре , при чем надолго

Ну, это вы погорячились. ЧПУ вообще ерунда, необязательная вещь. Левый роботс неприятно, но тоже не смертельно. В-общем, проблемы есть, но не уровня "все пропало", а уровня "все как попало, никто не занимался". Про фильтр вообще повеселило, умеют сеошники  трагизма нагонять 

[niger]

48 минут назад, Shureg сказал:

Ну, это вы погорячились. ЧПУ вообще ерунда, необязательная вещь. Левый роботс неприятно, но тоже не смертельно. В-общем, проблемы есть, но не уровня "все пропало", а уровня "все как попало, никто не занимался". Про фильтр вообще повеселило, умеют сеошники  трагизма нагонять 

https://www.owoxe.com/bed_linen?product_id=758

https://www.owoxe.com/index.php?route=product/product&product_id=758

 

Это дубль как я и писал. Хорошо, что Гугл написал вот как у него, а не посчитал дублями. 

 

 

 

А в поиске если искать товар. То вот он еще и по такой штуке доступен.

https://www.owoxe.com/index.php?route=product/product&product_id=758&search=Color+mix+CM-07+из+сатина%2C+евро+200x220+см%2C+Owoxe+Home

А ссылка везде должна быть одинаковая - или редирект или  каноникал должен быть. Или если хотите трекать что из поиска - юзайте utm метки

Змінено 23 липня 2021 користувачем niger