Защо и как да забраните индексирането на някои страници
Тези страници са най-добрите да не се даде на индекса, за да не се претрупва с индекса за търсене не е на правилната информация, по-добре е да се привлече вниманието си към по-важните страници на сайта ви.
Как можете да забраните индексирането на някои страници на сайта? За да направите това, има два начина - чрез специален и мета таговете на файла robots.txt. Нека поговорим за всеки един от тях поотделно.
Специално мета тагове
Мета таг се поставя в началото на документа между таговете
. Това обикновено не вижда служебната информация за потребителя, която съдържа инструкции за търсачките.Така например, не индекс на документа.
<Мета име = = съдържание "роботи" "Noindex">
<Мета име = съдържание "роботи" = "Nofollow">
За едновременни забрана за индексиране страници и обхождаме връзките в него.
<Мета име = = съдържание "роботи" "Noindex, Nofollow">
Файлът robots.txt
Този файл се намира в корена на обекта и са дадени инструкции за индексиране от търсачките сайт.
Най-простият пример е забраната за индексиране раздел на сайта изглежда.
User-Agent: *
Disallow: / сметка /
Двамата от гледна точка на текста означава, че всички търсачките да могат да не индексира всички файлове, съхранявани в директорията на сметка.