Перейти к содержимому

Реферальная программа Мегаплана

Выбрать шаблон и создать сайт

Закрыть от индексации страницы

#1 FIvYUr

FIvYUr
  • Пользователь
  • 156 сообщений
  • Репутация: 7
0

Отправлено 27 Февраль 2015 - 11:19

Доброго дня. Просмотрел Какие страницы у меня в Яндексе появились и призадумался.

 

Например:

apehablog.ru/page/10

apehablog.ru/personazhi-areny/igraem-gnomom-v-arene.html/comment-page-1

 

Я так понимаю это дубли? Их надо закрыть в robots.txt?

 

А так правильно?

Disallow: */comment-page-*

Disallow: */page-*

 

И нужно в function.php прописывать такой код? И куда его вставлять?

<meta name="robots" content="noindex,nofollow" />


 

 

  • 0

#2 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 632

Отправлено 27 Февраль 2015 - 12:32

FIvYUr, У меня закрыто просто в robots так

Disallow: /comments/
Disallow: /stati/page/
Disallow: /page/ 

Но, у Вас комментарий слово, без s будьте по внимательней.

А вообще в плагине All In One SEO Pack в настройках есть функция для запрета индексации комментариев и других лишних дублей.(если используйте его, то, по мимо robots еще и в плагине галочку поставьте)

P.s Повнимательней, лишнего не закройте.

Для проверки используйте инструмент https://webmaster.yandex.ru/robots.xml

Прям онлайн допишите строки для закрытия и внесите url проверьте, если закрыто как надо, то уже вписываем в реальный robots и заливаем на сайт.


Сообщение отредактировал BLIK: 27 Февраль 2015 - 12:51

  • 1


#3 FIvYUr

FIvYUr
    Topic Starter
  • Пользователь
  • 156 сообщений
  • Репутация: 7

Отправлено 27 Февраль 2015 - 15:14

Попробовал несколько вариантов. Получилось вот такое:

Disallow: этот URL не принадлежит вашему домену
/comment-page-* разрешен

Значится Disallow: /comment-page-* добавлять?


  • 0

#4 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 632

Отправлено 27 Февраль 2015 - 17:25

FIvYUr,Поставьте так и попробуйте

Disallow: /comment/ 

  • 0


#5 FIvYUr

FIvYUr
    Topic Starter
  • Пользователь
  • 156 сообщений
  • Репутация: 7

Отправлено 28 Февраль 2015 - 00:28

а так нельзя? /comment-page-*

или надо       */comment-page-*


  • 0

#6 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 632

Отправлено 28 Февраль 2015 - 00:48

FIvYUr, Так Вы не просто онлайн прям в Яндексе, где проверка robots впишите строки и проверьте url. Если закрыт, то внесете изменения в реальный файл. Так же после закрытия коммента, введите для проверки и чистый url, чтоб убедиться, что лишнего не закрыли.


  • 0


#7 Sosnovskij

Sosnovskij
  • Администратор
  • 3 883 сообщений
  • Репутация: 565

Отправлено 02 Март 2015 - 13:52

а так нельзя? /comment-page-* или надо       */comment-page-*

Вообще правильная конструкция будет

Disallow: */comment-page-

Звездочка будет указывать, что перед слешом может идти все что угодно. Звездочку на конце ставить не обязательно, так как она определяется роботом как по-умолчанию.


  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.



#8 FIvYUr

FIvYUr
    Topic Starter
  • Пользователь
  • 156 сообщений
  • Репутация: 7

Отправлено 02 Март 2015 - 16:40

Звездочка будет указывать, что перед слешом может идти все что угодно.

 

Я пробовал через https://webmaster.yandex.ru/robots.xml

со * впереди вот, что показывает:

 

Disallow: этот URL не принадлежит вашему домену
*/comment-page- не принадлежит вашему домену

 

 

без * впереди, вот что показывает:

 

Disallow: этот URL не принадлежит вашему домену
/comment-page- разрешен

 

Как забивать все равно это?

Disallow: */comment-page-

 


  • 0

#9 Sosnovskij

Sosnovskij
  • Администратор
  • 3 883 сообщений
  • Репутация: 565

Отправлено 02 Март 2015 - 20:39

@FIvYUr, прикрепите сюда скриншот страницы https://webmaster.yandex.ru/robots.xml так как вы ее заполняете.


  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.



#10 FIvYUr

FIvYUr
    Topic Starter
  • Пользователь
  • 156 сообщений
  • Репутация: 7

Отправлено 05 Март 2015 - 19:10

Вроде разобрался. Благодарю.


  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Оформление форума – IPBSkins.ru