Перейти к содержанию

Рекомендуемые сообщения

Закончил наполнять сайт, пока наполнял, сайт был закрыт от индексации в robots.txt

На днях добавил в я.вебмастер, открыл в robots для индексации, и сегодня вижу индексируются ссылки с ошибкой 404, но их и не должно быть на сайте, так как урл который указывается в вебмастере был поменян еще в декабре, а сайт открыл только сейчас и формат урла товара сейчас другой.
Вопрос какого он это делает и где он их эти ссылки вообще вытаскивает? в вебмастере нашел в истории обходов даты от ноября и декабря очень странно, хотя страницы попадают в индекс только с 26 января как открыл robots.
Чем чревато, что можно предпринять, если нужно экстренно? пока только закинул с десяток ссылок на удаление в вебмастере, потому что они точно больше не появятся, да и все остальные тоже.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

И много ссылок?

ссылки с 404 не идексируются!!!
Возможна ситуация что написано - not found, а отдает 200

Как это произошло уже не имеет смысла выяснять
Ждать когда они сами пропадут,
С другой стороны - это точно робот ходит по этим страницам?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
5 часов назад, chukcha сказал:

И много ссылок?

ссылки с 404 не идексируются!!!
Возможна ситуация что написано - not found, а отдает 200

Как это произошло уже не имеет смысла выяснять
Ждать когда они сами пропадут,
С другой стороны - это точно робот ходит по этим страницам?

Я админку пару месяцев назад первый раз в глаза увидел, а я.вебмастер таки вообще пару дней.
Я смотрю в индексирование-страницы в поиске, и там сейчас 92 страницы, пролистал их до конца и первая дата стоит 15.11, и они все коряченные будут
За 29.01 появились еще пару страниц 404, с датой последнего обхода 25.01, т.е робот ходил когда не надо было ему получается(раньше урл формировался из названия, типа brand_shveicariay, теперь просто brand, потому что страны были убого написаны и смысла не несли особо) и вот сейчас первые варианты попадают в вебмастер, 200 не может тк там реально пустая страница.
Я в декабре как-то обратил внимание в опекаете висит 5-10 активных пользователей с ip спайдер.яндекс, но значения не придал т.к в робости все прописал по инструкции
 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти

  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу

×

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.