Limes
Создатель
- Регистрация
- 16 Июл 2016
- Сообщения
- 31
- Реакции
- 8
Почему это не поможет. Условие запрещает всем роботом индексирование
Закрыть сайт от индексации
- Автор темы b10antoxa
- Дата начала
levsergeevich
Создатель
- Регистрация
- 13 Май 2016
- Сообщения
- 24
- Реакции
- 4
Справка гугл пишет: "Настройки файла robots.txt являются указаниями, а не прямыми командами. Googlebot и большинство других поисковых роботов следуют инструкциям robots.txt, однако некоторые системы могут игнорировать их. "
Поэтому чтобы наверняка, лучше прописывать мета тег дополнительно в head.
У меня несколько проектов в разработке, закрывал с помощью роботс, единственное где он появляется в выдаче (если в поисковике набрать имя_домена) - то это в google. И то, вместо сниппета написано - Описание недоступно из-за ограничений в файле robots.txt.
oecsvftt175
Создатель
- Регистрация
- 10 Май 2016
- Сообщения
- 35
- Реакции
- 5
Попробуй еще в хедере проставить мета тег noindex, nofollow, вместе с запретом в роботс.
Everstuu
Создатель
- Регистрация
- 19 Ноя 2013
- Сообщения
- 17
- Реакции
- 3
robots.txt не строго учитывается ПС, лучше в шаблоне сайта \catalog\view\theme\название_шаблона\template\common\header.tpl после тега <title></title> добавить строку <meta name="robots" content="noindex, nofollow" /> так будет надежнее, даже если сайт проиндексирован то через несколько обновлений ПС должен исчезнуть из выдачи.
