Много собственици на уебсайтове са изправени пред проблема за забрана на индексирането на ресурси и премахването им от търсачките. Това обикновено се случва, защото сайтът става остарял и без значение, издателят или посетителите губят интерес към сайта или сайтът съдържа лична и дори поверителна информация.
Инструкции
Етап 1
Има много начини да премахнете сайт от търсачките.
Първият и най-лесният начин да изтриете резултатите от заявката от търсачката е да изтриете страницата от самия сайт или да изтриете напълно CMS сайта чрез FTP връзка. След няколко дни търсачката ще актуализира базата данни и ще премахне връзката към вашия ресурс от резултатите от търсенето.
Стъпка 2
Най-популярният начин сред уебмастърите да защитят даден сайт, отделните му раздели или страници от индексиране и по този начин да премахнат връзките от резултатите от търсенето е да редактират файла robots.txt.
Можете да затворите отделна страница от индексиране с помощта на кода:
Потребителски агент: *
Disallow: /page.html (затваряне на страницата page.html)
Има много авторски инструкции за това как да използвате кодовете за файл robots.txt в Интернет.
Стъпка 3
Третият начин да премахнете страниците на сайта от търсачките е да използвате мета маркера на robots в неговите страници. Маркерът се записва в HTML кода на скритите страници между етикетите.
По този начин, след преиндексиране на PS сайта, страниците с този мета таг ще отпаднат от търсенето. Недостатъкът на този метод е, че много съвременни сайтове използват tpl шаблони, което означава, че ще трябва ръчно да промените кода на стотици, може би хиляди страници.
Стъпка 4
Четвъртият начин за премахване на сайтове от търсачките е чрез използване на заглавки X-Robots-Tag. Същността на тази заглавка е подобна на използването на предишния мета таг, но записът трябва да се намира в http заглавията:
X-Robots-Tag: noindex, nofollow
Стъпка 5
Най-ефективният начин да премахнете уебсайт (изцяло) от търсачките е да го премахнете от панела на уеб администратора. След актуализацията (3-7 дни) сайтът ще бъде недостъпен за търсачката. Панелът на уеб администратора е достъпен за търсачките Yandex (https://webmaster.yandex.ru/delurl.xml) и Google (https://webmaster.yandex.ru/delurl.xml).
