LJR: bugs - Индексация.
[Recent Entries][Archive][Friends][User Info]
11:25 am [marta_ketro]
[Link] |
Индексация.
|
|
| |
![[User Picture]](http://lj.rossia.org/userpic/203753/11) | | From: | nit |
| Date: | June 23rd, 2008 - 11:36 am |
|---|
| | | (Link) |
|
Можем и robots.txt в директории пользователя сделать, но вариант с rss все-таки кажется элегантнее
На robots.txt не в корне сайта никто не обращает внимания, я думаю. LJ точно на страницы с текстами дописывает <meta name="robots" content="noindex, nofollow, noarchive" /> <meta name="googlebot" content="noindex, nofollow, noarchive, nosnippet" />В Atom — вот такое: <feed xmlns="http://www.w3.org/2005/Atom" xmlns:lj="http://www.livejournal.com" xmlns:idx="urn:atom-extension:indexing" idx:index="no">С RSS там ничего и не делается, вроде как.
> На robots.txt не в корне сайта никто не обращает внимания
А, кроме ППБ, получается. |
|