Правильный robots.txt?

[Черный монах]

В инете столько противоречивой информации, что голова идет кругом :ck:
как создать, вернее что прописать в robots.txt для "убийства" дубликатов страниц?
нужно для joomla...

[Solyris]

joomla-docs.ru/Robots.txt

[PMR]

А дубликаты страниц поисковики прекрасно отсеят, не парься.

[Черный монах]

joomla-docs.ru/Robots.txt
СПС, но хрень это... мизер информации...
нашел сам, большую статью - Правильный robots.txt (http://rabotaisam.ru/robotstxt/what-robotstxt.html)

[Черный монах]

А дубликаты страниц поисковики прекрасно отсеят, не парься.

что то я в этом не уверен!
у Яши Загружено роботом 1872 стр., посмотрел какие ... ужаснулся :ac:, оч много дубликатов и страниц RSS и т. п., но в индексе действительно 700 стр., он то отсеял - но мне кажется что на seo это плохо влеяет...
хотя могу и ошибаться