Вчера пришло письмо от Google аналитик. Он никогда не писал мне о проблемах, чаще ругается Яндекс вебмастер.
В письме говорилось о проблеме на блоге — Проиндексировано, несмотря на блокировку.
Исправила и отправила на проверку. Ошибка исчезла.
Проблема только с одной страницей, но пока искала решение в интернете, прочла, что у других и по 500, и по 1000 страниц с подобной ошибкой.
Решение проблемы нашла на сайте https://inweb.ua/blog/answers/24/
На ресурсе советуют убрать из файла Robots txt директивы Disallow: /?s* и Disallow: /*?
Проверила свой Robots, действительно на комментариях стоит /*?Исправила и отправила на проверку. Ошибка исчезла.
Вполне возможно и вам этот способ поможет.
На сайте написано подробнее и про другие проблемы в Robots.
На сайте написано подробнее и про другие проблемы в Robots.
Желательно проверять robots.txt не только в Google, но и в Я.Вебмастере, в разделе Инструменты — Анализ robots.txt. Добавьте страницу и узнаете заблокирована страница или нет. Возможно в файле robots проблем нет.
Есть советы в сети вообще не обращать внимания на данную ошибку. Со временем она исчезнет сама.
Читайте информацию о файле Robots в справочнике Яндекс и справочнике Google.
Комментарии со спамом удаляются.