• Авторизация


Поисковики 26-07-2003 11:57 к комментариям - к полной версии - понравилось!


Ух ты... Я думал, дневники закрыты для поисковиков. А тут вот
http://search.rambler.ru/cgi-bin/rambler_search?wo...1%EA%E8%E9&qs=1&old_q=&where=1 - см. № 6.
вверх^ к полной версии понравилось! в evernote
Комментарии (7):
cinna 26-07-2003-12:00 удалить
ого!
вот так, незаметно, ты и стал звездой...;)
ustrizza 26-07-2003-12:05 удалить
знаешь, не все. ес-но собезьянничала - в итоге ustrizza рамблером нашлась у тя в дневнике. зато если искать гуглом, находится мужнин сайт в моем домене. :-))))

LI 3.6.05
енто поисковые пауки ... стоит разместить ссылку на твой дневник где -нибудь , они цапают её , и давай шерстить по страницам .. а там новые ссылки - они прутся туды ... и так без конца ....
Volokhonsky 29-07-2003-12:00 удалить
Исходное сообщение Призрак_Интернета
енто поисковые пауки ... стоит разместить ссылку на твой дневник где -нибудь , они цапают её , и давай шерстить по страницам .. а там новые ссылки - они прутся туды ... и так без конца ....


В том-то и дело, что они вовсе не должны индексировать то, что к индексированию запрещено. Как правило, в начале каталога ставится файл robots.txt, который указывает паукам, что им следует индексировать, а что не следует. Если попробовать поискать в яндексе, то обнаружится, что он индексирует только общие заглавные страницы сайта и форум, каталоги пользователей, но не внутреннюю начинку дневников. Впрочем, даже этот самый рамблер, как выяснилось, внёс в базу все тексты на страничке, кроме содержания записей.


Комментарии (7): вверх^

Вы сейчас не можете прокомментировать это сообщение.

Дневник Поисковики | Volokhonsky - Сегодня явно не день Бэкхема... | Лента друзей Volokhonsky / Полная версия Добавить в друзья Страницы: раньше»