Несколько способов удаления страниц из индексации поисковиков
У каждого вебмастера была ситуация когда нужно было удалить из поисковика страницы сайта из поисковика, которые туда попали по воле случая. К примеру можно привести ситуация с Мегофоном, sms пользователей которого проиндексировал Яндекс, практически любую информацию может проиндексировать поисковик, не в зависимости от важности информации. Вот и в таких ситуациях нам пригодится знать такую информацию, как удаление страниц из поисковых результатов.
1. Один из главных и простых способов это удаление страницы из писка – это удаление ее со своего сайта. В этом случаи при обращении к прежней страницы сервер будет выдавать ошибку 404 это означает что страницы больше не существует.
HTTP/1.1 404 Not Found
Но придется еще подождать пока робот посетит данную страницу. Но если страница должна существовать на сайте, но при это удалена из поиска, данный способ тут не подходит.
2. Файл (robots.txt) один из популярных методов закрытия индексации от поисковика.
Вот пример как закрыть страницу от индексации:
User-Agent: *
Disallow: /my_emails.html # закрытие страницы my_emails.html
Disallow: /search.php?q=* # закрытие страниц поиска
Но придется подождать пока робот не зайдет на сайт и выкинет з индекса страницу или раздел.
3. Следующий метод это мета-тег robots он задается в HTML-коде страницы между тегами
Пример:
Метод удобен тем, что его можно добавить на любую страницу.
4. Ну и последний метод это ручное удаление из панели упрвления
Но чтобы закрыть этим методом с перва нужно закрыть двумя предыдущими методами к примеру robots.txt и мета-теге.
Проще всего поставить запрет в robots.txt и тихо ждать другой альтернативы нет!