Перейти к содержимому

Реферальная программа Мегаплана


Правильный роботс для dle

#1 IlyaKravchenko

IlyaKravchenko
  • Пользователь
  • 28 сообщений
  • Репутация: 1
0

Отправлено 15 Август 2014 - 18:53

Доброго времени суток. С установкой данной cms автоматически "устанавливается" роботс, который имеет вид:

User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search

Является ли он "правильным"? И что означают следующие строки:

Disallow: /newposts/
Disallow: /*subaction=newposts

?

Это запрет индексации новых новостей или чего? 


 

 

  • 0

#2 GVA

GVA
  • Супермодератор
  • 998 сообщений
  • Репутация: 201

Отправлено 17 Август 2014 - 17:17


Является ли он "правильным"?

 

конечно, является правильным, но его можно существенно дополнить, например вот так:

User-agent: Yandex
Allow: /index.php?do=feedback
Disallow: /engine/
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /index.php?*
Disallow: /?newsid*
Disallow: /?do=*
Disallow: /*print
Disallow: /?do=search&mode=advanced
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /tags/
Disallow: /page/
Disallow: */page/
Disallow: /dle-rules-page.html


User-agent: *
Allow: /index.php?do=feedback
Disallow: /engine/
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /index.php?*
Disallow: /?newsid*
Disallow: /?do=*
Disallow: /*print
Disallow: /?do=search&mode=advanced
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /tags/
Disallow: /page/
Disallow: */page/
Disallow: /dle-rules-page.html



Sitemap: http://сайт/sitemap.xml
Host: сайт.ru 


Это запрет индексации новых новостей или чего?

 

нет, это запрет к индексации страниц, где расположены краткие новости с момента последнего посещения. Лишние дубли не нужны.


  • 0


Оформление форума – IPBSkins.ru