Опыт ведения блога Голосов: 0 Адрес блога: http://myblaze.ru Добавлен: 2011-09-01 13:52:24

Правильный robots.txt для WordPress

2011-08-27 16:25:06 (читать в оригинале)

Сегодня я добавил наконец себе файл robots.txt. Вообще он нужен для поисковиков и конкретно для того, чтобы запрещать им индексировать определенные папки. Речь идет, конечно, о системных папках. Помните недавний инцидент с утечкой конфиденциальных данных в сеть у некоторых интернет магазинов? Вот это все как раз потому, что персональные данные не были запрещены к индексации. [...]