Решил написать эту статью для тех, кто столкнулся с проблемой бан сайта в поисковой системе Яндекс.
Значит так, зарегистрировал я этот сайт в системе Ucoz 16.05.11 (доменное имя). Как вы знаете в системе Ucoz стоит ограничение на идексацию новых сайтов один месяц. Заполнил сайт и стал ждать пока пройдёт этот пресловутый один месяц.
По прошествии указанного срока начал регистрировать сайт в поисковых системах (Google, Yandex и т.д.).Прошёл верификацию (то есть подтвердил права на управление сайтом) и стал следить как быстро поисковые роботы добавят сайт в поиск. Со всеми поисковиками проблем не было, страницы потихоньку начали появляться в индексе, а с яндексом начались проблемы. При входе в панель управления Яндекс/Вебмастер увидел вот такое сообщение:
Я конечно удивился, сайт зарегистрирован на Ucoz 16.05.11. , а робот получил запрет на индексацию 31.05.11. (добавил сайт в Яндекс после того как прошло более месяца). Первым делом проверил robots.txt. В нём запрета на индексацию не было, стандартный robots Ucoz:
Далее решил написать письмо в службу поддержки Yandex. Ниже приведу весь диалог который состоялся у меня с Платоном Щукиным:
14 мар. в 00:37 [ htmlbook.ucoz.ru ] Запрет в файле robots.txt на индексацию роботом Яндекс отсутствует, но сайт не индексируется.
Сейчас
с Вашим сайтом все в порядке, в ближайшее время он должен начать
индексироваться и затем сможет появиться в поиске. Скорее всего, это
произойдет в течение двух недель.
С уважением, Платон Щукин Служба поддержки Яндекса
12 апр. в 20:15
[ htmlbook.ucoz.ru ] Здравствуйте. Все страницы сайта http://htmlbook.ucoz.ru,
администратором которого я являюсь, выпали из индекса поисковой
системы. В панели управления Яндекс.Вебмастер появляется вот такое
сообщение:
31.05.2011 наш робот получил полный запрет на
индексирование сайта в Вашем файле robots.txt, поэтому сайт в поиске не
участвует. Пожалуйста, воспользуйтесь формой проверки. Если сейчас
запрет отсутствует, то сайт начнет индексироваться в течение 2 недель,
после чего сообщение обновится. Если запрет все еще присутствует, то по
вопросу устранения этой проблемы Вам нужно обратиться к администратору
Вашего сайта или хостеру.
Запрета в файле robots.txt на индексирование сайта нет.
Прошло уже более трёх недель, а сайт так и не появился в поиске. Поясните, пожалуйста, что не так с моим сайтом?
Благодарим Вас за письмо. В настоящий момент
индексирование Вашего сайта не запрещено. Мы постараемся определить, по
какой причине он не начинает индексироваться, и сделаем все возможное,
чтобы ее устранить.
21 апр. в 14:15 [ htmlbook.ucoz.ru ]
Здравствуйте, *****!
Хотелось бы всё таки узнать причину почему сайт http://htmlbook.ucoz.ru не индексируется поисковым роботом. Жду с нетерпением Ваших рекомендаций как исправить ситуацию.
Мы продолжаем заниматься анализом причин
из-за которых Ваш сайт не начал индексироваться. С Вашей стороны всё
настроено правильно, и никаких действий от Вас не требуется
Теперь остаётся только ждать пока робот Яши обратит внимание на сайт и заинтересуется им. По логам смотрел, что после каждого обращения в службу поддержки Яндекса на сайт заходят роботы. Вот один из них:
Информация об IP-адресе 213.180.219.217
по данным RIPE: % This is the RIPE Database query service. % The objects are in RPSL format. % % The RIPE Database is subject to Terms and Conditions. % See http://www.ripe.net/db/support/db-terms-conditions.pdf
% Note: this output has been filtered. % To receive output for a database update, use the "-B" flag.
% Information related to '213.180.216.0 - 213.180.219.255'
Так что внимание к сайту уже привлёк. Теперь нужно сайт в нескольких нормальных каталогах зарегистрировать которые Яша индексирует (радует что в Mail.ru приняли) и посмотрим что из этого получится.
Подозрение такое, что до меня кто-то использовал это доменное имя и на своём сайте занимался какой то деятельностью, которая противоречит правилам поисковой системы Яндекс. За что и был занесён этот сайт в чёрный список. Ну будем пытаться выводит сайт из этого списка. А получится или нет, буду писать в продолжении этой статьи.
23.04.12
Итак вернёмся к сайту. Сегодня при заходе в панель Яндекс.Вебмастер увидел следующую картину:
Робот который заходил на сайт 21 апреля загрузил два файла Sitemap (forum и shop). Основной файл Sitemap загрузил я сам 15-го апреля. Файлы находящиеся в обработке обрабатываются в течении двух недель. Так что 29-го по идее сайт должен быть проиндексирован (главная страница). На этом пока всё, отпишусь 29-го.
P.S. Нашёл следы старого хозяина сайта на одном из форумов:
26.04.12.
Сайт начал индексироваться.
29.04.12
Рад сообщить, что главная страница появилась в поиске.
Надеюсь что эта статья поможет тем, кто столкнулся с проблемой бана сайта поисковой системой Яндекс.
Спасибо за вопрос. Отвечу так - продвижением сайта не занимался, ссылки не покупал,зарегистрировал сайт в нескольких каталогах. Старался сделать сайт удобным для пользователей.
Добавлять комментарии могут только зарегистрированные пользователи. [ Регистрация | Вход ]