ну вот не надо сравнивать ситуацию когда дубли создаются по глупости и когда дубли, это неизбежное зло в виде неправильной работы cms. давай к этому еще вспомним категории которые доступны по адресу со слешем и без слеша на конце, страницы для печати и тд. дублей в разы больше чем мы о них можем подозревать. если взять любой форумный движок, к примеру smf — то там вообще начинается ахтунг, когда один и тот же контент доступен почти по десятку адресов. с этим можно бороться закрывая роботсом дубли, но поскольку, ссылочное терять умный человек не будет, то делается корректный 301 редирект.
в 99.9% процентов случаев любой дубль эта глупость. Есть файл robots.txt, и если можно составить хотя бы какую то регулярную маску можно закрыть любые дубли.
Гугл, в отличии от яндекса, эту проблему воспринимает более серьезно и специально для исключения дублей, ввел канонические страницы. чтобы вебмастер мог ему явно указать что вот эта страница — это первоисточник контента, а остальные дубли.
Очередной бред. Яндекс тоже давно ввел каноникл (http://webmaster.ya.ru/replies.xml?item_no=10371) система будет адаптироваться лет 5 пока матрикснет научится с ней нормально работать. В гугле думаю тоже не меньше. Иновационности никакой. ПС активно кладут на этот тег. Отчасти конечно он полезен. Действительно убирает часть ненужных старниц из выдаче, да вот только незадачка. поисковик имеет для каждого сайта количество страниц которое он может на нем придти и загрузить. И если у сайта нет быстро бота.а на нем скажем 1000 страниц — то страничка может попадать в индекс месяцами. У меня был сайт на дле еще до того как я начал постигать сео у него было 9000 страниц. после закрытия всех ненужных осталось 1000. В итоге сайт обновляется в 20 раз быстрее и каждую выдачу я вижу динамику..
ага, вот только некоторые, не буду показывать кто, разводит людей за свои косяки на пару сотен тысяч, потому что первоначально аудита не делали и продвигали дубли, которые вылетели :)
Что читать вы не научились это понятно, но вы хоть не додумывайте…