Здравствуйте, друзья! Сегодня мы поговорим о том, как убрать страницы блога из индексации поисковой системы Яндекс. Спросите зачем мне это надо, если у меня есть настроенный файл robots.txt? Но, поверьте, надо! Это очень хорошо, если Вы человек-решение. А если в силу определенных причин Вы начали делать свой блог и потом мужественно отложили это дело до лучших времен?
Я начал делать свой блог еще в прошлом году. Выбрал шаблон, поставил несколько плагинов, сделал несколько тестовых записей, с помощью которых разбирался в своем шаблоне. И… бросил.
На тот момент времени блог мне нужен был лишь для канала на YouTube, и вернулся я к нему только сейчас в процессе обучения в школе «Я – блогер». В общем, за эти несколько месяцев все мои эксперименты были проверены поисковыми роботами и соответственно проиндексированы в Яндексе и в Google.
А теперь, когда я убрал те первые статьи, у меня автоматом получился почти десяток условно битых ссылок.
И надо было исправлять ситуацию. Удаление страниц из поиска производится посредством инструментов сервиса поисковой системы для вебмастеров. Для Яндекса он называется Яндекс.Вебмастер.
Как видите даже в стартовом интерфейсе Яндекс.Вебмастера можно сразу перейти к «заветному» делу. Но этот метод хорош, когда Вы намеренно удалили страничку и сразу «заметаете» следы. Я же страницы удалял пару недель назад, естественно их адреса я не копировал. На тот момент я даже подумать не мог, что ко мне на сайт уже зашел поисковый робот и вполне возможно не один раз. Поэтому пришлось идти таким путем:
Яндекс.Вебмастер в ответ пристыдил меня списком моих «пустышек».
В принципе ничего страшного нет. Если перейти по любой такой ссылке, то получается вот такой результат:
Но зачем он нужен? А поскольку у меня была не одна такая ссылка, то я выделил и скопировал такие адреса в отдельный текстовый документ:
Ну а дальше уже все совсем просто: выбрал в Яндекс.Вебмастере функцию «Удалить URL» и вставляя по очереди из списка ссылки на удаленные страницы внес их в форму сервиса.
Теперь, когда поисковый робот зайдет на мой сайт, он увидит, что страниц, которые он видел раньше не просто нет, но и то, что я хочу, чтобы он их вычеркнул из своей памяти.
Вот такую работу над ошибками пришлось мне делать в награду за свою нерасторопность. Осталось то же самое сделать для поиска Google, но это уже в следующей статье. Кстати, очень советую, как можно раньше познакомиться с возможностями Яндекс.Вебмастера. Особенно, если Вы, как и я новичок.
Оставляйте свои комментарии насколько полезна была моя информация. Особенно хотелось бы узнать, есть ли среди моих читателей такие же долго-сайто-строители (во какое слово придумал!). А я пока пойду готовить статью по удалению ссылок из поиска Google.
С уважением, Сергей Почечуев
Сергей, поздравляю с блогом! И статья весьма полезная. Поместил в закладки. Может пригодиться в дальнейшем если не для меня, хотя бы другим посоветую. Удачи Вам в полëте к цели!!! 🙂
С уважением: Эдуард
Эдуард, спасибо за супер комментарий!
У меня в Вебмастере висят некоторые страницы, которых нет на блоге несколько лет. И не пропадают, хотя запрещены в robots.txt И удалить тем способом, какой Вы описали, не получается, так как их и в индексе нет. Замкнутый круг )
Юлия, я извиняюсь, что отвечаю поздно. А все из-за того-же самого замкнутого круга. Увидел Ваш комментарий только сегодня! Только сегодня Акисмет показал, что он заблокировал некоторые комментарии. В том числе и Ваш. Не знаю почему он так сработал, но, видно не зря поговорка про старуху и проруху. Тот нонсенс с индексацией, про который Вы написали, вполне может быть из ряда этих самых прорух. В Гугле точно невозможно навсегда закрыть от индекса то, что уже единожды проиндексировано, пока он сам не решит, к примеру, не индексировать несуществующую статью. Хотя это вообще парадокс – индексировать то, чего на самом деле нет! Но тем не менее, пути (мозги) поисковых систем неисповедимы. В Вашем случае, я бы посоветовал обратиться в помощь Яндекса. Они такие вопросы рассматривают и решают. Что-то мне подсказывает, что истина очень даже проста…
Интересная информация. Спасибо. Пригодится, потому как хочу переделать расположение статей на блоге.
Да, Наталья, блог – это творчество и постоянный поиск нового!
Сергей, я вовремя увидела вашу статью. Сейчас нахожусь с подобном положении, но еще хуже))
Я недавно перевела блог на https, обнулился тиц, и сейчас еще страницы выпадают из яндекс поиска.
И много страниц с ошибкой 404, т.к. я “почиталась”, и решила навести порядок на блоге и пообъединяла некоторые рубрики, в итоге – люди заходят с того же поиска яндекс и попадают на несуществующие страницы, и уходят естественно.. Я в шоке…
Скажите, мне ведь может помочь удаление юрл, как вы показали в статье?
И второй вопрос, если можно, не могу на него в интернете человеческого ответа найти:
В яндекс вебмастере после переезда на https выходит ошибка: Сервер отвечает редиректом на запрос /robots.txt (файл роботс не найден, хотя он есть и гугл его видит, а яндекс-нет) соответсвенно, новые статьи не индексирует, а старые удаляются из поиска(
Люба, посмотрите ссылку, которую я Вам сбросил в ВК
Спасибо, Сергей, посмотрела и ответила вам!
Я пробую так сделать, но у меня пишет что нет основания для удаления и не чего дальше уже не сделать.
Тёзка, попробуйте написать в поддержку Яндекса!