Перейти к содержимому

Реферальная программа Мегаплана


Правильный ли robots.txt для wordpress

#1 sgsss2008

sgsss2008
  • Пользователь
  • 5 сообщений
  • Репутация: 0
-1

Отправлено 02 Июнь 2013 - 12:25

подскажите это правильный у меня роботс для wordpress, пожалуйста.))

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-
Disallow: /category/
Disallow: /category/*/*
Disallow: */feed
Disallow: */*/feed/*/
Disallow: */comments
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /tag/
Disallow: /archive/
Disallow: /catalog
Disallow: /autor/
Disallow: /page/
Crawl-delay: 4

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-
Disallow: /category/
Disallow: /category/*/*
Disallow: */feed
Disallow: */*/feed/*/
Disallow: */comments
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /tag/
Disallow: /archive/
Disallow: /catalog
Disallow: /autor/
Disallow: /page/
Crawl-delay: 4
Host: xn----7sbbsioi4d.xn--p1ai

я сама училась составлять. и не закрыла я там ни чего нужного от индексации??

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Можно ли в robots.txt указывать несколько sitemap?
  2. Robots.txt для Wordpress
  3. Robots.txt для Wordpress?
  4. Корректность robots.txt для wordpress
  5. В какой дериктории должен находиться файл robots.txt

#2 isvetlichniy

isvetlichniy
  • Пользователь
  • 619 сообщений
  • Репутация: 93

Отправлено 02 Июнь 2013 - 15:28

подскажите это правильный у меня роботс для wordpress, пожалуйста.))

ну так все зависит от того,что ты хочешь получить в итоге
сейчас у тебя закрыто по сути все, кроме постов. если это твой конечная цель - то вперед

еще содержимое роботса может менятся в зависимости от версии вордпресса и установленных плагинов
  • 0

#3 Sosnovskij

Sosnovskij
  • Администратор
  • 3 886 сообщений
  • Репутация: 566

Отправлено 02 Июнь 2013 - 16:57

Allow: /wp-content/uploads/

Это не обязательно.

Disallow: /category/
Disallow: /category/*/*

Эти 2 правила дублируют друг друга. * в конце каждого правила идет по-умолчанию. Я бы категории не закрывал бы.

Disallow: */feed
Disallow: */*/feed/*/

Тоже самое - дубли

Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback

И снова дубли.

Можно еще ссылку на карту сайта в xml-формате в robots.txt указать.
  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.



#4 html-ka

html-ka
  • Пользователь
  • 455 сообщений
  • Репутация: 82

Отправлено 02 Июнь 2013 - 19:08

а чем тебя стандартный не устраивает?
  • 0


Оформление форума – IPBSkins.ru