Каталог дублей инстанта! Давайте соберем здесь все известеные неприкрытые дубли инстанта?

Ну все выражаются как могут.

PS: стоило писать тогда наверно threadN-1.html, а не threadN-(*).html

опечатка, что я Вам за это должен?

опечатка, что я Вам за это должен?

Грубить изволите?
Я задал вопрос, мне ответили, я пояснил почему у меня возник вопрос.

Проверьте в яндексе свой роботс.

смотрел, ничего не понятно.

взял подсмотрел у известного товарища шакина — shakin.ru

и сделал как у него:

взял подсмотрел у известного товарища шакина — shakin.ru

жестко) только как вариант вордпресса подходит под InstantCms. Если бы вы подсмотрели на этом форуме, то увидели бы ряд тем с выложенными вариантами роботсов, даже в блоге есть пару записей. Не там читаете.

да уж… дождитесь лучше среды) вернусь с коммандировки, поправлю по-человечески)

жестко) только как вариант вордпресса подходит под InstantCms

никак не подходит...
несколькими постами выше выложил его как пример, но он был коряв, нашел правильный, от него можно и плясать

+ товарищ FreeLancer в первых постах писал то что нужно закрывать

например вот тут почитайте, используйте поиск здесь. instantcms.ru/forum/thread9866.html

Вобщем свободное время появилось, но править не вижу смысла… т.к. скоро выйдет 1.9.1, где скорее всего это все исправят

в блогах было дважды разжевано как правильно написать роботс, однако это не наш метод и проще тырить чужие вместе с чужими ошибками


у шакина сайтмапы не пашут так как плавают в воздухе и юзерагенты идут не корректно, принято сначало писать тех к кому обращаешься, а потом остальных, а не наоборот. иначе при различии правил, яндекс секцию с * может вполне принять на свой счет. в этом конкретном роботсе правила одинаковые, но вот при различиях бы....

яндекс — налево
гугл — направо
яху — пшел вон, не индексировать
остальные — все в сад

а не "ну ка все в сад! ", а потом кричать.."ээээ, яндекс! куда попер!.. Эээ… дарагой я не тебе, вернись, не надо в сад!!"

хм… а эти страницы лучше исключить из индексирования?


/board/city*
/board/by_user_*

Основное закрыто, проверь те в в вебмастре применительно к своим сайтам.
Если что то не закрыто, выкладывайте, будем делать конкретно под ваш сайт или возможно что то пропущено, просто нет время полностью все облазить из платного и всяких дополнений. Как будут появляться от вас новые дубли в этой теме, по возможности сразу начну думать как или чем их убирать.
Выбираем одноименный пункт и смотрим и тестим.
Тестим robots.txt (ссылку укоротил, дабы инстант не резал)

Выбираем одноименный пункт и смотрим и тестим.

для вордпреса получил такой роботс:

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Host: prokomputer.ru
Sitemap: prokomputer.ru/sitemap.xml

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Host: prokomputer.ru
Sitemap: prokomputer.ru/sitemap.xml


в вебмастере пишет Найдено несколько директив Host.

--Важно: Директива Host в файле robots.txt может быть только одна. В случае указания нескольких директив, использоваться будет первая — help.yandex.ru/webmaster/?id=996567#996574

посему переписал так:

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Host: prokomputer.ru
Sitemap: prokomputer.ru/sitemap.xml

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=

lifeact, 301 >>> mywordpress.ru/support/

mywordpress.ru/support/

причем тут, я воспользовался твоим сервисом… он мне выдал такой роботс, сам говорил замечания писать…