Перейти к содержимому

Реферальная программа Мегаплана


Закрыть от индексации страницы сайта в robots.txt

#1 orpix

orpix
  • Пользователь
  • 100 сообщений
  • Репутация: 0
0

Отправлено 17 Май 2014 - 12:04

Всем привет. Требуется закрыть от индексации страницы сайта  МОЙСАЙТ.РУ/tag/minecraft

 

Мне нужно, чтобы все страницы сайта, которые начинаются с tag были совсем закрыты от Поисковиков.

 

Я сделал так

 

Disallow:/tag
Disallow:/tag/

 

 

  • 0

#2 Ixman

Ixman
  • Пользователь PRO
  • 2 165 сообщений
  • Репутация: 436

Отправлено 17 Май 2014 - 14:06

orpix, по идее должно хватить такого варианта

Disallow:/tag

  • 0

#3 yuran

yuran
  • Пользователь
  • 496 сообщений
  • Репутация: 30

Отправлено 17 Май 2014 - 14:34

А по идеи разницы нету, два варианта подойдут. Ведь в двух вариантах страницы будут закрыты где /tag. А последний / роли не играет.


  • 0

#4 orpix

orpix
    Topic Starter
  • Пользователь
  • 100 сообщений
  • Репутация: 0

Отправлено 17 Май 2014 - 14:40

Ну а страницы после слова тег тоже индексироваться не будут? например сайт.ру/tag/vopros1/vopros2 эта страница тоже не будет индексироваться?


  • 0

#5 Andrew

Andrew
  • Пользователь
  • 211 сообщений
  • Репутация: 3

Отправлено 17 Май 2014 - 17:56

да, тоже закрыта от индексации.


  • 0

#6 yuran

yuran
  • Пользователь
  • 496 сообщений
  • Репутация: 30

Отправлено 17 Май 2014 - 17:57

Да,конечно не будут. Вы же запрещаете таким образом индексацию всех страниц которые начинаются с tag/


  • 0

#7 orpix

orpix
    Topic Starter
  • Пользователь
  • 100 сообщений
  • Репутация: 0

Отправлено 18 Май 2014 - 18:45

Disallow: /*? а что запрещает вот эта строчка?


  • 0

#8 GVA

GVA
  • Супермодератор
  • 998 сообщений
  • Репутация: 201

Отправлено 18 Май 2014 - 19:04

orpix, волшебная ссылка, которая даст ответы на все ваши вопросы, относительно robots.txt  _http://help.yandex.r.../robots-txt.xml


Сообщение отредактировал GVA: 18 Май 2014 - 19:05

  • 0

#9 Renovatio

Renovatio
  • Пользователь
  • 187 сообщений
  • Репутация: 4

Отправлено 11 Сентябрь 2014 - 21:07

Disallow: /*? а что запрещает вот эта строчка?

 

весь сайт закроете


  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Оформление форума – IPBSkins.ru