Настройка Robots.txt
08-09-2010 11:40
к комментариям - к полной версии
- понравилось!
Чтобы не забыть:
вверх^
к полной версии
понравилось!
в evernote
Чтобы не забыть:
- от индексации необходимо закрывать логи сервера - это сугубо служебная информация;
- закрыть нужно результаты внутреннего поиска по сайту - типичный источник дублей страниц;
- с
помощью правила Clean-param можно запретить поисковой системе
индексировать страницы c различными модификаторами URL, идентификаторами
сессий и так далее, которые генерируются системой управления контентом
(CMS) - так можно предупредить попадание в индекс огромного количества
дублей. Можно запретить также индексацию страниц гостевых книг, форумов и
прочих подобных. Кстати, мы уделяем столько внимания «борьбе с дублями»
потому, что их наличие сильно затрудняет продвижение;
- следует закрывать страницы, возникающие при некорректной обработке запросов к базе данных сайта;
- от индексации нужно закрыть дубли главной страницы - даже если на них поставлен редирект с помощью .htaccess.
Вы сейчас не можете прокомментировать это сообщение.
Дневник Настройка Robots.txt | BGamer - Дневник BGamer |
Лента друзей BGamer
/ Полная версия
Добавить в друзья
Страницы:
раньше»