Перейти к содержимому



Правильный robots.txt для англоязычного фотоблога

#1

Поделиться сообщением #1



slink3771

slink3771
  • Неактивные
  • 4 сообщений
  • Репутация: 0
0

Отправлено 16 Январь 2014 - 18:10

Всем привет. Люди,у кого есть опыт продвижения англоязычного фотоблога, мне надо конкретный, оптимальный, правильный robots.txt. и если не сложно набор оптимальных плагинов.

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Правильно ли составлен robots.txt для блога
  2. Правильный ли robots.txt для wordpress
  3. Robots.txt - что такое и как им правильно пользоваться
  4. Правильный ROBOTS.TXT для Битрикса
  5. Составление файла robots.txt

#2

Поделиться сообщением #2



hammer8

hammer8
  • Пользователь
  • 321 сообщений
  • Репутация: 31

Отправлено 16 Январь 2014 - 20:27

Вопрос: Какой движок и структура у блога?
  • 0

#3

Поделиться сообщением #3



slink3771

slink3771
    Topic Starter
  • Неактивные
  • 4 сообщений
  • Репутация: 0

Отправлено 17 Январь 2014 - 07:28

Движок Wordpress
  • 0

#4

Поделиться сообщением #4



hammer8

hammer8
  • Пользователь
  • 321 сообщений
  • Репутация: 31

Отправлено 18 Январь 2014 - 22:23

Уверен, данный роботс вам полностью подойдет.

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /category/
Disallow: /author/
Disallow: /page/
Disallow: /tag/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /category/
Disallow: /author/
Disallow: /page/
Disallow: /tag/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: http://site.com
Sitemap: http://site.com/sitemap.xml
Sitemap: http://site.com/sitemap.xml.gz

Сообщение отредактировал hammer8: 18 Январь 2014 - 22:24

  • 0

#5

Поделиться сообщением #5



Svyatogor

Svyatogor
  • Неактивные
  • 8 сообщений
  • Репутация: 0

Отправлено 28 Январь 2014 - 17:28

А я вот не уверен, что это правильный robots.txt.
Не факт, что на сайте нужно будет закрывать от индексации страницы категорий
Disallow: /category/

Статические страницы
Disallow: /page/

Страницы тегов
Disallow: /tag/
  • 0


Оформление форума – IPBSkins.ru