1 (13.06.2013 13:02 отредактировано DaivZ)

Тема: Как открыть для индексации некоторые страницы?

Вопрос такого плана, возможно ли открыть для индексации некоторые профиль пользователей:
Например: /user/Nick/
остальные же профили должны бить закрытии для индексации.
Тогда уже и вопрос на засыпку открыть для индексации некоторые теги  по адресу:
/tags/9.7/
Остальные закрыть.

Вопрос состоит в том как это сделать с наименьшими затратами времени если у тебя кучу профилей и пару сотен тегов.

Re: Как открыть для индексации некоторые страницы?

DaivZ пишет:

Вопрос состоит в том

Зачем?

Это все можно провернуть следующим образом.
В robots.txt прописать:
Allow: /user/Nick/
Disallow: /user/
Allow: /tags/9.7/
Disallow: /tags/

Таким образом, /user/Nick/ и /tags/9.7/ будут доступны роботам, а все остальные адреса, начинающиеся с /user/ и /tags/ будут запрещены.

3

Re: Как открыть для индексации некоторые страницы?

и у меня вопрос:
если у себя в коде удалю строчку полностью :   <meta name="robots" content="noarchive"/>
что будет? как поведут себя поисковики?

4

Re: Как открыть для индексации некоторые страницы?

Начнет выводить ссылку на кеш, если ее сейчас не выводил.
Как он на это должен вообще отреагировать, этот тег мало кто использует и проблем не испытывают, от куда они (проблемы) у вас должны появится и почему?!