программа для проверки сайта

[mitandaster]

добрый день

Какой программой можно проверять сайт на ошибки?
1. В netpeak spider ввожу https://lixcompany.ru. Старт. проверяет только первую и останавливается. Пишет, что нет title и description, но они есть. Пишет: "отсутствует или пустой h1", но он есть и он не пустой. Пишет, что "страницы без внутренних ссылок", но они есть.
2. Screaming Frog SEO spider - тоже проверяет только первую страницу. пишет что 200ОК и все.

3. https://a.pr-cy.ru/lixcompany.ru/ - пишет, что H1 не обнаружен, но он есть.

4. https://www.cy-pr.com/a/lixcompany.ru

Заголовок: Нет
Описание: Нет

5. Все онлайн СЕО проверки

https://www.seogadget.ru, https://2ip.ru, https://analizsaita.com/ и другие
все как одни пишут, что
Заголовок: (Нет)
Описание: (Нет)
Ключевые слова: (Нет)
Внешних ссылок (без noindex): 0
Внутренних ссылок: 0
<H1>: (Нет)

 

Посоветуйте, с чем вы работаете??

Почему п.1 и 2 не хотят проверять мой сайт дальше первой страницы и не видят title и description? 

спасибо

Змінено 16 червня 2019 користувачем mitandaster

[startkomp]

Сайт призрак!

а может из-за в роботс

User-agent: SemrushBot
Disallow: / 

User-agent: SemrushBot-SA
Disallow: /

 

Если в лягушке поменять юзер агента на яндекс то обходит нормально

Змінено 17 червня 2019 користувачем startkomp

[mitandaster]

3 часа назад, startkomp сказал:

User-agent: SemrushBot Disallow: / User-agent: SemrushBot-SA Disallow: /

удалила это все. Ситуация пока не поменялась..

[mitandaster]

3 часа назад, startkomp сказал:

Если в лягушке поменять

у меня демо, к сожалению... Там нет возможности менять настройки