Проиндексировано, несмотря на блокировку.

Сегодняшний пост будет коротким,  о проблемах в шаблоне на Блогспот. 
Вчера пришло письмо от Google аналитик. Он никогда не писал мне о проблемах, чаще ругается Яндекс вебмастер. 
В письме говорилось о проблеме на блоге — Проиндексировано, несмотря на блокировку.
Проблема только с одной страницей, но пока искала решение в интернете, прочла, что у других и по 500, и по 1000 страниц с подобной ошибкой. 
Решение проблемы нашла на сайте https://inweb.ua/blog/answers/24/ 
На ресурсе советуют убрать из файла Robots txt директивы Disallow: /?s* и Disallow: /*?
Проверила свой Robots, действительно на комментариях стоит /*?
Исправила и отправила на проверку. Ошибка исчезла. 
Вполне возможно и вам этот способ поможет.
На сайте написано подробнее и про другие проблемы в Robots.

Желательно проверять robots.txt не только в Google, но и в Я.Вебмастере, в разделе Инструменты — Анализ robots.txt. Добавьте страницу и узнаете заблокирована страница или нет. Возможно в файле robots проблем нет. 

Есть советы в сети вообще не обращать внимания на данную ошибку. Со временем она исчезнет сама. 
Читайте информацию о файле Robots в справочнике Яндекс и справочнике Google.
Отправить комментарий

Комментарии со спамом удаляются.