нужно сделать запрет индекирования поисковиками

[uadesign]

как сделать запрет индекирования поисковиками

чтобы поисковики и не заходили на мой сайт!!!

 

[dos03]

Интересный вопрос
Используй robots.txt
например закрыть msn:

User-agent: msnbot
Disallow: /

маилру
User-agent: Mail.Ru
Disallow: /

 

[uadesign]

больше интересует гугла и яндекс

 

[flixin]

Можно через роботс

# robots.txt for http://domen.com

User-agent: *
Disallow: /

Правда этого мало, гугл все равно лазит.
Самый надёжный способ сделать файл .htaccess в корне сайта и туда прописать:

RewriteEngine on 
RewriteBase / 
RewriteCond %{HTTP_USER_AGENT} ^Yandex [NC,OR] 
RewriteCond %{HTTP_USER_AGENT} ^googlebot [NC,OR] 
RewriteCond %{HTTP_USER_AGENT} ^stackrambler [NC] 
RewriteRule .* - [F]

можно добавить ещё юзер-агентов поисковиков, просто добавлять после

RewriteCond %{HTTP_USER_AGENT} ^googlebot [NC,OR]

строчку вида

RewriteCond %{HTTP_USER_AGENT} ^юзер-агент-поисковика [NC,OR]

и тогда всем перечисленным поисковикам будет выдаваться 403 ошибка (доступ запрещён)

 

[sw04]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

User-agent гугла - googlebot
User-agent яндекса - Yandex

 

[uadesign]

вообщем поможет?


создам 2 файла:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

чтото еще мож засунуть, чтобы уж наверника ботов небыло

 

[sw04]

в мета тэги

<meta name="robots" content="noindex,nofollow" />

 

[flixin]

Мета-тег robots, имхо, очень слабо влияет на поведение поискового робота.

2dos03, если ты не заметил, то я ответил на вопрос топикстартера, а вот ты ничего дельного не добавил. Полегче с выражениями.

 

[dos03]

Мета-тег robots, имхо, очень слабо влияет на поведение поискового робота.

Лучше отвечай на конкретные вопросы, а не переводи тему в дискуссионную плоскость

uadesign, поможет - прописывай, все что посоветовали. других способов практически нет (только роботс и хтаксесс). Если конечно не организовать себе бан в поисковиках

 

[egorix]

Поставте пароль или капчу и тогда никакой поисковик не пролезет

И вопрос к остальным почему не хватит robots.txt? зачем надо ещё htaccess? гугл-то лазит в поисках ссылок, чтобы перейти по ним, но вес не будет учитывать всё-равно... и индексировать страницу не будет точно.