Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

Извечная проблема. robot.txt


Recommended Posts

Вроде все правильно настроил, ну чтож может быть не так. Гугл пишет:

Спойлер

image.thumb.png.7f302671dd2208d1b04226c35738dd9a.png

 

...Обязательно ли в роботе.тхт - указывать ссылку на сайтмап? ведь тогда я открываю доступ всем и вся в возможности парсинга себ(((.

 

Какую блокировку я пропустил? Прошу помощи.

robots.txt

Змінено користувачем wwizard
Надіслати
Поділитися на інших сайтах


не обязательно, ссылку на sitemap можно указать в панели вебмастера

Надіслати
Поділитися на інших сайтах


Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
  • Зараз на сторінці   0 користувачів

    • Ні користувачів, які переглядиють цю сторінку

×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.