Закрытие сайта от индексации robots txt
Всем привет! Как сделать так что бы сайт не индексировался. Вроде как можно что то сделать с robots txt. Кто вообще с этим сталкивался, эффективно?
Да все элементарно достаточно достаточно создать в корне сайта текстовый файл robots.txt и прописать там определенные строки:
User-agent: Yandex
Disallow: /
И вуаля все готов)
Да вроде как не все так просто. Некоторые специалисты говорят что только этого может и не хватить. Тогда даже не знаю что еще нужно там сделать..
А для какой цели нужно закрывать сайт от этой индексации? Мне всегда казалось что наоборот нужно быть открытым в сетевом поле для привлечения посетителей. А вы делаете наоборот.
matt: А для какой цели нужно закрывать сайт от этой индексации? Мне всегда казалось что наоборот нужно быть открытым в сетевом поле для привлечения посетителей. А вы делаете наоборот.
@matt обычно это делают когда сайт только создают или переделывают. Что бы люди не заходили на сайты которые еще совсем не готовы. Думаю именно для этих целей придумывают такое.
danielle_herzog: @matt обычно это делают когда сайт только создают или переделывают. Что бы люди не заходили на сайты которые еще совсем не готовы. Думаю именно для этих целей придумывают такое.
@danielle_herzog А что такого ну пусть заходят. Больше будет хождений по сайту и следовательно он в поисковике будет выше стоять когда вы уже по настоящему его запустите. Так что проблем в этом вообще не вижу.