Ето защо Google изрично се посочва:
За да се избегне загубата на позицията за доставка, трябва да:
1. Отворете в Robot.txt достъп до всички CSS и JS файлове и проверка на файла robots.txt
3. сайт Disable Scan използването на мета тагове или HTTP заглавната част на X-роботи-маркер.
роботи мета таг ви позволява да се определи индексът на настройките и дисплея в резултатите от търсенето по отделно за всяка страница. Трябва да се добави към раздела. например:
Мета тагове в горния пример, забранява всички търсачки показват на страницата с резултати от търсенето. Предварително определената стойност за името на атрибута (роботи), показва, че директивата се прилага за всички роботи. Ако искате да се откаже достъп до само един от тях, вместо роботи определят различна стойност за име на атрибут, а именно името на робота. Някои уеб роботите наричани потребителски агенти (верижен използва потребителския агент за заявка за страница). Основната ни извиква робота Googlebot. За да забраните сканирането на страницата само за него, промените маркера, както е показано по-долу:
Маркерът казва Google робот (но не и други търсачки), че страницата не трябва да се показва в резултатите от търсенето. Името на атрибути и съдържанието не са чувствителни.
Търсачките могат да използват множество роботи за различни ресурси или цели. Пълен списък на Google роботи е показано тук. Например, за да се покаже страница в уеб търсене на Google, но не и в Google News, използвайте следния мета маркер:
Ако трябва да посочите директиви за множество роботи, можете да използвате няколко роботи мета:
При констатиране на конфликт на директивите на Google роботи ще изпълняват най-строгите от тях.
Свързани статии