Перейти к содержимому



Как запретить к индексации концовку url в robots.txt

#1 NightHawk

NightHawk
  • Пользователь
  • 46 сообщений
  • Репутация: 5
0

Отправлено 06 Ноябрь 2012 - 21:55

Как правильно задать запрет индексации по конечному пути?
У меня такой путь к странице soc/id-nick/friends.html
/soc/ блокировать я не хочу, так как там есть страницы достаточно полезные.
id-nick запрещать так же не станешь, по понятным причинам. Следовательно нужно только запретить friends.html.
Что в роботе написать?
Disallow: /friends.html$
Все ли роботы понимают? Как правильно сделать в общем.

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Запрещенный файлом robots.txt
  2. Robots в DLE запретить индексацию тегов
  3. Указанный url запрещен к индексированию в файле robots.txt
  4. Наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt
  5. Запрет индексации определенного URL в robots.txt без запрета последующих

#2 Sosnovskij

Sosnovskij
  • Администратор
  • 3 886 сообщений
  • Репутация: 566

Отправлено 06 Ноябрь 2012 - 22:08

Disallow: /*friends.html
  • 1

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.




Оформление форума – IPBSkins.ru