Перейти к содержимому



Robots.txt

#11 Artpsiholog Artalexa-Jt

Artpsiholog Artalexa-Jt
  • Пользователь
  • 24 сообщений
  • Репутация: 0
0

Отправлено 03 Октябрь 2009 - 20:35

http://robotstxt.org.ru/ Думаю, здесь собрано максимум полезного по файлу robots.txt. :)
  • 0

#12 FaTeRy

FaTeRy
  • Пользователь
  • 480 сообщений
  • Репутация: 1

Отправлено 03 Октябрь 2009 - 22:54

http://robotstxt.org.ru/ Думаю, здесь собрано максимум полезного по файлу robots.txt. :)

Да, верно. Сам хотел скинуть этот сайт.
  • 0

#13 KJGoodWork

KJGoodWork
  • Пользователь
  • 11 сообщений
  • Репутация: 0

Отправлено 04 Октябрь 2009 - 09:12

robots.txt важный файл для каждого сайта, советую его написать !
  • 0

#14 oVr

oVr
  • Пользователь
  • 7 сообщений
  • Репутация: 0

Отправлено 13 Март 2010 - 20:16

Спасибо за инфу. Сколько тусуюсь в этих доменах, хостингах, но всё время никак не мог сообразить, для чего этот robots.txt
Теперь ясно, спасибо.
  • 0

#15 gancher

gancher
  • Пользователь
  • 4 сообщений
  • Репутация: 0

Отправлено 24 Октябрь 2010 - 08:46

Насколько мне известно, наличие robots.txt необязательно.
Поисковики итак добавят.
По крайней мере на укозе точно.
  • 0

#16 Skeptik

Skeptik
  • Пользователь
  • 197 сообщений
  • Репутация: 0

Отправлено 02 Ноябрь 2010 - 13:42

Обязательно, если вы что-то хотите открыть для индексации на сайте, а что-то запретить.
  • 0


Оформление форума – IPBSkins.ru