продвижение сайтов - блог seo специалиста Голосов: 0 Адрес блога: http://www.seowind.ru Добавлен: 2011-11-10 02:40:29

Настройка robots.txt

2011-09-17 23:47:30 (читать в оригинале)

При проведении базового аудита сайта seo специалист всегда должен проанализировать такой важный файл как robots.txt. Данный файл должен быть у каждого сайта. Если данного файла все же нет, то его необходимо создать. Файл всегда находится в корневой директории сайта, например у меня: http://www.seowind.ru/robots.txt. Создается файл в обычном текстовом редакторе. На этапе аудита выявляются ошибки, для [...]