У меня та же проблема ... была.
Как я решил - оказывается в гугл консоли ответ лежал на поверхности - идете по хелпу на проблему и все решается.
Что в конце концов помогло - в robots.txt :
User-agent: * Allow: /
Sitemap: https://сайт/sitemap.xml
вместо Disallow пишем Allow.
Но это еще не все - в Гугле висит кешированый robots.txt
идете - Тестування файлу robots.txt (это в консоли, не найдете - загуглите)
там виден ваш последний кешированый
кнопка "Надіслати" + "Попросіть Google оновити" + "Надіслати"
вуаля - виден ваш последний роботс!
дальше идем в сайтмап в консоли и удалив предыдущую версию грузим актуальную
и все работает))