icoools.com Голосов: 0 Адрес блога: http://icoools.com Добавлен: 2013-02-04 19:15:47

Создаем robots.txt для поисковых роботов

2013-02-03 22:46:15 (читать в оригинале)

Что такое robots.txt? Многие начинающие «вебмастера» задаются данным вопросом. Все довольно просто. robots.txt – это обычный текстовый файл, который располагается в корневой директории сайта и сообщает поисковым роботам, какую страницу надо индексировать, а какую нет. Так же с его помощью можно закрыть доступ к некоторым страницам сайта. Создать данный файл просто необходимо, так как он [...]