Тег тоже управляет индексацией сайта, но в отличие от файла robots.txt он управляет индексацией одной web-страницы.
Для записи инструкций по индексации, используется поле content=”...”.
Приведем список всех возможных инструкций: NOINDEX - запрещает индексирование документа; NOFOLLOW - запрещает переход по ссылкам документа; INDEX - разрешает индексирование документа; FOLLOW - разрешает переход по ссылкам документа;
ALL - равносильно INDEX, FOLLOW; NONE - равносильно NOINDEX, NOFOLLOW
По умолчанию принимается значение .
В поле content дублирование инструкций, наличие противоречивых инструкций и т.п. не допускается; в частности, значение поле content не может иметь вид "none, nofollow". |