Перейти к содержанию
khaptani

Сервер отвечает редиректом на запрос /robots.txt

Рекомендуемые сообщения

Здравствуйте.

При проверке Яндексом robots.txt вылезает ошибка:

"Сервер отвечает редиректом на запрос /robots.txt"

 

Добавлял записи в .htaccess. Что нужно сделать, чтобы яндекс прочел robots?

В настоящий момент файл .htaccess выглядит так:

# 1.To use URL Alias you need to be running apache with mod_rewrite enabled.
# 2. In your opencart directory rename htaccess.txt to .htaccess.
# For any support issues please visit: http://www.opencart.com
Options +FollowSymlinks
# Prevent Directoy listing
Options -Indexes
# Prevent Direct Access to files
<FilesMatch "(?i)((\.tpl|\.ini|\.log|(?<!robots)\.txt))">
 Require all denied
## For apache 2.2 and older, replace "Require all denied" with these two lines :
# Order deny,allow
# Deny from all
</FilesMatch>
# SEO URL Settings
RewriteEngine On
# If your opencart installation does not run on the main web folder make sure you folder it does run in ie. / becomes /shop/
RewriteBase /
RewriteRule ^sitemap.xml$ index.php?route=extension/feed/google_sitemap [L]
RewriteRule ^googlebase.xml$ index.php?route=extension/feed/google_base [L]
RewriteRule ^system/download/(.*) index.php?route=error/not_found [L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond %{REQUEST_URI} !.*\.(ico|gif|jpg|jpeg|png|js|css)
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]
### Additional Settings that may need to be enabled for some servers
### Uncomment the commands by removing the # sign in front of it.
### If you get an "Internal Server Error 500" after enabling any of the following settings, restore the # as this means your host doesn't allow that.
# 1. If your cart only allows you to add one item at a time, it is possible register_globals is on. This may work to disable it:
# php_flag register_globals off
# 2. If your cart has magic quotes enabled, This may work to disable it:
# php_flag magic_quotes_gpc Off
# 3. Set max upload file size. Most hosts will limit this and not allow it to be overridden but you can try
# php_value upload_max_filesize 999M
# 4. set max post size. uncomment this line if you have a lot of product options or are getting errors where forms are not saving all fields
# php_value post_max_size 999M
# 5. set max time script can take. uncomment this line if you have a lot of product options or are getting errors where forms are not saving all fields
# php_value max_execution_time 200
# 6. set max time for input to be recieved. Uncomment this line if you have a lot of product options or are getting errors where forms are not saving all fields
# php_value max_input_time 200
# 7. disable open_basedir limitations
# php_admin_value open_basedir none
### Display PHP errors 
### Uncomment the commands by removing the # sign in front of it.
# php_flag display_startup_errors on
# php_flag display_errors on
# php_flag html_errors on
# php_flag track_errors on
# php_value error_reporting "E_ALL"
RewriteEngine On
RewriteCond %{HTTPS} =off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
<FilesMatch "robots.txt$"> 
RewriteEngine off 
</FilesMatch>

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

 

RewriteEngine On
RewriteCond %{HTTPS} =off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteCond %{REQUEST_URI} !robots\.txt
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Т. е. у меня не хватало строчки:

RewriteCond %{REQUEST_URI} !robots\.txt

Я добавил ее, но никаких изменений

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

ispmanager? уберите галку в www доменах про принудительное перенаправление на SSL.
и
 

RewriteCond %{REQUEST_FILENAME} !robots\.txt

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>

Попробуйте поставить перед: RewriteEngine On

Изменено пользователем skylin371

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
14 минут назад, php5 сказал:

ispmanager? уберите галку в www доменах про принудительное перенаправление на SSL.
и
 


RewriteCond %{REQUEST_FILENAME} !robots\.txt

 

не могу сказать, ispmanager или что. Строку переписал, результата нет(

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond %{REQUEST_URI} !.*\.(ico|gif|jpg|jpeg|png|js|css)
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]

Т.н эти правила пропустили

 

 

потом

 

RewriteEngine On
RewriteCond %{HTTPS} =off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
<FilesMatch "robots.txt$"> 
RewriteEngine off 
</FilesMatch>

А что здесь?

 

редиректить если не https?

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
46 минут назад, chukcha сказал:

RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond %{REQUEST_URI} !.*\.(ico|gif|jpg|jpeg|png|js|css)
RewriteRule ^([^?]*) index.php?_route_=$1 [L,QSA]

Т.н эти правила пропустили

 

 

потом

 


RewriteEngine On
RewriteCond %{HTTPS} =off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
<FilesMatch "robots.txt$"> 
RewriteEngine off 
</FilesMatch>

А что здесь?

 

редиректить если не https?

 

Да, редиректить если не https.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

ну.. а робот по какому протоколу  доступен?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
2 минуты назад, chukcha сказал:

ну.. а робот по какому протоколу  доступен?

https

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

И он прописан в явебмастере?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
8 минут назад, chukcha сказал:

И он прописан в явебмастере?

Сейчас проверил в яндексмастере.

name.ru подтвержден

https//name.ru не подтвержден. закачиваю файл подтверждения в корень, но яндекс его не видит.

www.name.ru висит отдельным сайтом

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти

  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу

×

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.