Перейти к содержимому



Гугл монстерски индексирует

#1

Поделиться сообщением #1



MaxNeo

MaxNeo
  • Неактивные
  • 28 сообщений
  • Репутация: 0
0

Отправлено 05 Декабрь 2011 - 11:53

Всем привет!
У меня в яндексе индексируется 47 страниц
В google 494
Это норм?

Роботс такой

User-agent: *
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: maxneo.ru

Sitemap: http://maxneo.ru/sitemap.xml.gz
Sitemap: http://maxneo.ru/sitemap.xml


Заранее спасибо!

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Google не индексирует сайт
  2. Гугл не индексирует русскоязычную часть сайта
  3. Гугл плохо индексирует блог
  4. Яндекс не индексирует страницы записей на wordpress
  5. Почему не индексирует Гугл

#2

Поделиться сообщением #2



mrdimshop

mrdimshop
  • Неактивные
  • 50 сообщений
  • Репутация: 0

Отправлено 05 Декабрь 2011 - 12:42

Это нормально. Только зачем тебе в роботс писать отдельно для яндекса если у тебя уже общее для всех поисковиков написано?
  • 0

#3

Поделиться сообщением #3



Sosnovskij

Sosnovskij
  • Администратор
  • 4 140 сообщений
  • Репутация: 622

Отправлено 05 Декабрь 2011 - 13:07

MaxNeo, часто google индексирует намного больше страниц, чем Яндекс. Также часто его роботом игнорируется robots.txt. Скажите, сколько примерно полезных страниц имеется на сайте? Из их числа можно судить о полноте индексации.

mrdimshop, как-то уже давно пошло, что для Яндекса в robots.txt прописываются условия отдельно :rolleyes:.
  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.



#4

Поделиться сообщением #4



Майкл

Майкл
  • Неактивные
  • 46 сообщений
  • Репутация: 4

Отправлено 05 Декабрь 2011 - 16:35

Да-да, Гугл всегда ест больше чем Яндекс. Вроде ему плевать на тег ноиндекс.
  • 0

#5

Поделиться сообщением #5



Sosnovskij

Sosnovskij
  • Администратор
  • 4 140 сообщений
  • Репутация: 622

Отправлено 05 Декабрь 2011 - 17:12

Майкл, на такой <noindex></noindex> - да, а мета-тег noindex

<meta name="robots" content="noindex, nofollow"/>
понимает :rolleyes:
  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.



#6

Поделиться сообщением #6



Майкл

Майкл
  • Неактивные
  • 46 сообщений
  • Репутация: 4

Отправлено 05 Декабрь 2011 - 17:20

оу. Спасибо. не знал.
  • 0

#7

Поделиться сообщением #7



InVision

InVision
  • Неактивные
  • 17 сообщений
  • Репутация: 2

Отправлено 05 Декабрь 2011 - 18:36

Я заметил, что в сайтах с возрастом до года, количество страниц в индексе Гула на порядок больше, нежели Яши. Так что, это нормально когда в индексе Гугла страниц на порядок больше нежели у Яши.
  • 0

#8

Поделиться сообщением #8



MaxNeo

MaxNeo
    Topic Starter
  • Неактивные
  • 28 сообщений
  • Репутация: 0

Отправлено 07 Декабрь 2011 - 09:53

Всего 58 записей + 6 страниц. В один момент сделал правильные ЧПУ, в тот момент было где то 25 записей
  • 0

#9

Поделиться сообщением #9



clinoc11

clinoc11
  • Неактивные
  • 6 сообщений
  • Репутация: 0

Отправлено 13 Декабрь 2011 - 10:03

Да-да, Гугл всегда ест больше чем Яндекс. Вроде ему плевать на тег ноиндекс.

А разве не так? Разве Гугл не "noffolow" вместо "noindex" использывает?
  • 0

#10

Поделиться сообщением #10



MaxNeo

MaxNeo
    Topic Starter
  • Неактивные
  • 28 сообщений
  • Репутация: 0

Отправлено 24 Декабрь 2011 - 19:47

Обновляю данные:
Яндекс - 99
Google / % страниц не под фильтрами 1,240 / 44 %

Подскажите, что делать?
  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Оформление форума – IPBSkins.ru