Перейти к содержимому

Сервис обмена электронных валют

Выбрать шаблон и создать сайт

Robots.txt - что такое и как им правильно пользоваться

#11 Rexxar

Rexxar
  • Пользователь
  • 590 сообщений
  • Репутация: 36
10

Отправлено 09 Октябрь 2013 - 20:07

Так как очень не желательно указывать их между директив, в смысле можно и в конце, после директив, но не между дисалов.
  • 0


#12 Beggarm

Beggarm
  • Пользователь
  • 432 сообщений
  • Репутация: 43

Отправлено 09 Октябрь 2013 - 20:46

На начальном этапе, директиву Sitemap вообще не стоит прописывать, так как не плохо парсят молодые сайты.
Как раз на днях нужно было собрать robots.txt для нового проекта, но у меня в закромах, лежал готовый файл и как раз из него данная директива была удалена.
  • 0

#13 mullins

mullins
    Topic Starter
  • Пользователь
  • 45 сообщений
  • Репутация: 4

Отправлено 25 Октябрь 2013 - 23:00

С этим согласен, но это уже скорее частный случай. И тогда надо оговорить - какой должен быть "этот начальный этап" по времени для молодого сайта? Пол года или год? или.....?


  • 0

#14 Beggarm

Beggarm
  • Пользователь
  • 432 сообщений
  • Репутация: 43

Отправлено 26 Октябрь 2013 - 09:07

По крайне мере, пока нормально не начнёт индексировать, но в принципе то можно уже не беспокоиться, ведь вступило новое правило о добавлении новых статей в оригинальные тексты Я.Вебмастер.


  • 0


Оформление форума – IPBSkins.ru