Ищу Решение проблемы с кучей дублей.

[skiffa]

В поиске 200 страниц, а загружено 1100...Дубли такого вида
.manufacturer/
by,category_name/dirDesc
by,product_name
by,mf_name/dirDesc

Джумла 3+виртуемарт.
Как можно решить эту проблему?Заранее всем спасибо!
Мой роботс
User-agent: *
Allow: /*.js
Allow: /*.css
Allow: /*.jpg
Allow: /*.gif
Allow: /*.png
Allow: /templates/*.css
Allow: /templates/*.js
Allow: /components/*.css
Allow: /components/*.js
Allow: /media/*.js
Allow: /media/*.css
Allow: /plugins/*.css
Allow: /plugins/*.js

Disallow: /administrator/
Disallow: /cache/
Disallow: /home
Disallow: /includes/
Allow: /components/com_virtuemart/
Disallow: /components/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /search/
Disallow: /*.pdf
Disallow: /*print=1
Disallow: /manufacturer
Disallow: /product_sku
Disallow: /*type=atom


User-agent: Yandex
Allow: /*.js
Allow: /*.css
Allow: /*.jpg
Allow: /*.gif
Allow: /*.png
Allow: /templates/*.css
Allow: /templates/*.js
Allow: /components/*.css
Allow: /components/*.js
Allow: /media/*.js
Allow: /media/*.css
Allow: /plugins/*.css
Allow: /plugins/*.js
Disallow: /manufacturer
Disallow: /product_sku
Disallow: /administrator/
Disallow: /cache/
Disallow: /home
Disallow: /includes/
Allow: /components/com_virtuemart/
Disallow: /components/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /search/
Disallow: /*.pdf
Disallow: /*print=1
Disallow: /*type=atom

 

[vlad-online]

Добавьте еще
Disallow: /*by,
Disallow: /*dirDesc

 

[SkyViruS]

Попробуйте для начала закрыть через робот по примеру выше. Если боты не посмотрят на рекомендации с роботс.тхт тогда советую попробовать JL No Doubles. Склеивает очень много дублей, а там же есть гибкие настройки для исключений

 

[ipvitaliy]

используйте канонические ссылки, чтобы дубли тем самым не мешались