SEO старт с Artox media Голосов: 1 Адрес блога: http://workbuy.ru Добавлен: 2012-06-19 22:49:20 блограйдером victorio74

Файл Robots.txt для CMS WordPress

2012-06-23 01:42:18 (читать в оригинале)

Несомненно, для того чтобы поисковые боты знали, что подлежит индексации на созданном сайте или блоге, а что не подлежит, им необходимо представлять каким-то образом информацию. В качестве такого, своеобразного указателя и служит файл robots.txt. В этом файле документируются особые правила индексации и прописываются определенные шаблоны подлежащих и неподлежащих индексации категорий, файлов, папок и прочего содержимого сайта. Особого умения составления robots.txt требуют многие CMS. Ведь многие проекты SEO старта начинаются именно с них. В данном посте я приведу пример составления этого файла для WordPress.