Здравствуйте! Недавно искал одну статью, которая попала в top 100 в ЖЖ. Искал по названию, ключевым словам и т.д. через поиск в яндексе. Возможно я ошибаюсь, но создалось впечатление, что яндекс страницы пользователей не индексирует... В общем вопрос такой, бывают ли ситуации, когда целесообразно отключать индексацию страниц и материалов пользователей (через robots например) в соцсети, даже если доступ к странице "public" ?
В robots.txt - "Disallow" все, кроме Xmap. В Xmap - то, что хочу показать. Если на сайте социальная сеть, есть страницы пользователей, с доступом "public" эти страницы открывать для индексации или есть случаи, когда лучше не открывать?
Последнее редактирование: 10 года 5 мес. назад пользователем Alex45.
