Задачата за премахване на отделни страници или целия сайт от търсачките се изправя пред уебмастъра при промяна на информация, промяна на домейн, комбиниране на няколко ресурса и редица други причини. Има няколко начина за решаване на проблема, в зависимост от желания резултат.
Инструкции
Етап 1
Изтрийте страницата, която ще бъде деиндексирана, така че сървърът да връща съобщение за грешка, когато се опитва да навигира до избраната уеб страница HTTP / 1.1 404 Not Found. За да приложите избраните промени, трябва да изчакате роботът да има повторен достъп до необходимата страница.
Стъпка 2
Използвайте кореновия файл на робота robots.txt, за да изключите избраните раздели или страници от индексирането на търсачката. За да предотвратите показването на администраторския панел в търсачката, използвайте командата: User-Agent: * Diaallow: / admin / Или, за да изключите избраната страница от индексиране, въведете стойността: User-Agent: * Disallow: / selected_page.html # За да приложи промените, роботът трябва да посети отново избраната страница.
Стъпка 3
Използвайте метода на метамаркирането, за да добавите правило, посочено в HTML код, към всички необходими страници: Това е необходимо, за да се изключат нежеланите страници от търсачката.
Стъпка 4
Изберете метод за създаване на X-Robots-Tag за въвеждане на команди в http-хедъра, които не се показват в кода на страницата: X-Robots-Tag: noindex, nofollow Този метод е най-полезен за изключване на избрани страници или раздели от индексирането на чуждестранни търсачки.
Стъпка 5
Използвайте специална страница за управление на уеб администратори в Yandex: https://webmaster.yandex.ru/deluri.xml или в Google: https://www.google.com/webmasters/tools. Това се прави, за да се забрани показването на желания страница, раздел или цял сайт в избраната търсачка.
