Помощник
|
Правильный robots.txt для англоязычного фотоблога |
slink3771
|
Сообщение
#1
|
||
|
|
||
|
|||
hammer8 |
16.1.2014, 21:27;
Ответить: hammer8
Сообщение
#2
|
|
Вопрос: Какой движок и структура у блога?
|
|
|
slink3771
|
Сообщение
#3
|
|
Движок Wordpress
|
|
|
hammer8 |
18.1.2014, 23:23;
Ответить: hammer8
Сообщение
#4
|
|
Уверен, данный роботс вам полностью подойдет.
User-agent: *
Disallow: /cgi-bin Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/cache/ Disallow: /wp-content/themes/ Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: /category/ Disallow: /author/ Disallow: /page/ Disallow: /tag/ Disallow: /feed/ Disallow: */feed Disallow: */trackback Disallow: */comments Disallow: /*? Disallow: /*?* Disallow: /*.php User-agent: Yandex Disallow: /cgi-bin Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/cache/ Disallow: /wp-content/themes/ Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: /category/ Disallow: /author/ Disallow: /page/ Disallow: /tag/ Disallow: /feed/ Disallow: */feed Disallow: */trackback Disallow: */comments Disallow: /*? Disallow: /*?* Disallow: /*.php Host: http://site.com Sitemap: http://site.com/sitemap.xml Sitemap: http://site.com/sitemap.xml.gz Сообщение отредактировал hammer8 - 18.1.2014, 23:24 |
|
|
Svyatogor |
28.1.2014, 18:28;
Ответить: Svyatogor
Сообщение
#5
|
|
|
А я вот не уверен, что это правильный robots.txt.
Не факт, что на сайте нужно будет закрывать от индексации страницы категорий Disallow: /category/ Статические страницы Disallow: /page/ Страницы тегов Disallow: /tag/
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
ВНИМАНИЕ: OnClickA - надежная рекламная сеть для вебмастеров и рекламодателей 🔥 Монетизируй любой трафик 🔥 Выкупим весь твой трафик. Повышенные выплаты для топовых паблишеров |
6 | OnClickA | 1944 | Вчера, 17:15 автор: OnClickA |
|
✅ sms.chekons.com - ⭐ Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" ⭐ Сервис для получения SMS на реальные номера USA |
9 | Chekon | 3365 | Вчера, 13:24 автор: Chekon |
|
AviTool - мощный инструмент для автоматизации работы с Avito | 90 | Shadow | 76512 | 15.3.2024, 22:07 автор: Shadow |
|
Получение гос. гранта для IT сферы | 2 | metvekot | 933 | 15.3.2024, 11:08 автор: Skyworker |
|
Atlantic 2.0 - для безлимитного решения кликами Recaptcha и кликовой капчи Яндекс | 3 | waterworld | 1502 | 14.3.2024, 12:29 автор: waterworld |
Текстовая версия | Сейчас: 19.3.2024, 11:36 |