GM Studio Голосов: 1 Адрес блога: http://gmstudio.com.ua Добавлен: 2010-05-27 04:19:09

Правильный Robots.txt для WordPress

2017-02-05 23:47:19 (читать в оригинале)

В корневой директории сайта создаем файл Robots.txt и вносим в него следующее: User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Host: www.yourdomain.ru Sitemap: http://yourdomain.ru/sitemap.xml