дубликаты с www и без ,в выдаче

[doxx]

народ такой трабл, первый раз сталкиваюсь..

после сегодняшнего апа, в индексе
яши, запрос

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

site.ru/rss.php
site.ru
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся

В роботсе
Host: site.ru

на сайте стоит ссылка на главную вида:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Перед этим была смена движка на сайте, и как следствие поменялись урлы..
Долго не переиндексировался, в этот ап вроде частично. переиндексировался, но большая часть старых, уже несуществующих остались в индексе.

редиректы в роботсе не вариант делать, страниц много.

внутренние страницы, запрос:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

выдача:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

или это норм?

 

[doxx]

Сделай редирект 301 на нужный тебе вариант, дубли склеятся со временем редирект поможет склеить в нужную тебе сторону.

прочитай первый пост, написал же не вариант...

 

[o_nix]

это ненормально всё закончится в лучшем случае тем что яндекс автоматом выберет какой всётаки домен ему нравится больше с www или без

для того чтобы сделать редирект ненадо много усилий достаточно сделать ридирект домена - во всех урэлах он будет присутствовать и будет редиректить на правильный
Практика показывает чем меньше даёш яндексу свободы (хард методами к коим роботс не относится) тем меньше у тебя проблем в будущем

RewriteEngine On  
RewriteCond %{HTTP_HOST} ^www.sait.ru$ [NC]
RewriteRule ^(.*)$ http://sait.ru/$1 [R=301,L]

так всегда даже при переходе по www будет переправляться на site.ru без www и проблем не будет.
Это правило работает абсолютно для всех URL

 

[hipachka]

прочитай первый пост, написал же не вариант...

Вам предлагают сделать редирект не через robots а через .htacess в предыдущем посте даже приведен код, как это можно сделать.

 

[doxx]

спасибо за ответы.
я вот думаю стоит подождать пару апов, так как старые страницы, которых уже нет, так и не выпали из индекса, в общем , как бы, дождаться полной переиндексации, возможно редирект не понадобится? имеет смысл ждать?
( с момента смены движка прошло около 2-х апов )

 

[casinolot]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[doxx]

*** скрытое содержание ***

сайтЫ? сайт один )))
User-Agent: Yandex
Disallow: /index.php
Disallow: /map.php
Disallow: /contacts.php
Disallow: /news.php
Disallow: /robots.php
Disallow: /articles.php
Disallow: /sitemap.php
Disallow: /search.php
Host: site.ru
сейчас так и стояло, ( несколько недель )

 

[casinolot]

Yandex

сайтЫ? сайт один )))
User-Agent: Yandex
Disallow: /index.php
Disallow: /map.php
Disallow: /contacts.php
Disallow: /news.php
Disallow: /robots.php
Disallow: /articles.php
Disallow: /sitemap.php
Disallow: /search.php
Host: site.ru
сейчас так и стояло, ( несколько недель )

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[Grey_Shadow]

Disallow: /sitemap.php

А зачем закрывать от индексации карту сайта? Она же вроде для того и предназначена, чтобы улучшать оную?

 

[doxx]

А зачем закрывать от индексации карту сайта? Она же вроде для того и предназначена, чтобы улучшать оную?

это не карта, а просто дубль страницы.