Правилен ли сайтмап?

Статус
В этой теме нельзя размещать новые ответы.

ancifer2002

Полезный
Регистрация
14 Мар 2009
Сообщения
633
Реакции
19
Правилен ли роботс.тхт?

Со приходом страшнейших и опаснейших АГСов всё больше и больше СЕОшников прибегают к закрытию рубрик, тегов и т.п. в своих сапосателлитах. Я не придавал этому значения, пока не потерял почти 150 своих сатов. Вот в свежевыгруженные стал добавлять роботс.тхт вот такого содержания, как нашёл на одном СЕО-блоге. Правилен ли он, и можно ли что подкорректировать?
HTML:
User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: site.ru
Sitemap: http://site.ru/sitemap.xml
 
Это robots для WordPress.
Если у вас на нем сателлиты, тогда подойдет.

и карту сайта
Sitemap: Для просмотра ссылки Войди или Зарегистрируйся
спрятать нужно.
 
Наверное человек ответил сгоряча, не подумав. А может и есть на то весомые причины. Но тогда теряется смысл существования самой карты :)
 
Не надо прятать карту сайта, это тупость. Карта сайта сбособствует более быстрому индексированию. Я с помощью закладок и карты за 3-6 часов вгонял полностью сайты в индекс гугл.
Карту сайта рекомендуют использовать поисковики гугл и яндекс - читайте их рекомендации для вебмастеров.
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху