дубли страниц

сейчас заметил что в индексе яндекса появилась новая страница :
www.uniproekt.ru/77/1-2010-02-18-19-07-24.html - она дублирует главную страницу .. не пойму откуда она появилась гадина :)
может кто подскажет как правильно закрыть ее от индекса..

читал про робот.тхт не очень еще вьехал в тему ..
допустим я могу закрыть ее так :
Disallow: /77/1-2010-02-18-19-07-24.html
или так
Disallow: /*1-2010-02-18-19-07-24.html*

мне надо чтоб такой адрес остался в индексе : /77.html
в общем надеюсь кто в курсе как правильно все делается

да , кажется разобрался
так будет правильно : Disallow: /77/1-2010-02-18-19-07-24.html
если нет, то напишите , или может есть какое хорошее средство от дублей ..

pastushok, лучшее средство от дублей - забыть про дубли. Поисковики определят дубли и склеят их, либо оставят в индексе только одну из страниц.

спасибо wedal, буду знать...

а если они оставят в индексе не ту страницу, которую надо?

scalex, оставят ту, которую посчитают более важной для пользователя на основе ссылок и пользовательских факторов.

Кстати, Яндекс все-таки рекомендует избавляться от дублей, но это он связывает с тем, что если дублей много, то они будут мешать проиндексировать другие страницы сайта. Речь идет о том, что Яндекс индексирует не весь сайт сразу, а постепенно, по N страниц за раз. Если он будет индексировать дубли, то что-то важное в этот N может не войти сразу. Но это существенно, когда дублей очень много. Если же их 10-20, то особой роли они не сыграют.