Перейти к содержимому



Robots и индексация

#1

Поделиться сообщением #1



Alex-H

Alex-H
  • Неактивные
  • 1 сообщений
  • Репутация: 0
0

Отправлено 14 Июнь 2013 - 15:51

Ребята, помогите решить задачу.
Страниц на сайте меньше было, чем индексировалось Яндексом в 2 раза.
Посмотрел курс "SEO-бомба", там сказано, что все "левые"(дублирующие) страницы надо закрывать от индексации.
Проверил, оказалось, что даже некоторые картинки у меня являются как страницы...
В общем в стандартный(правильный) файл "robots" я добавил вот эти строчки:

Disallow: /?s=
Disallow: /*.php$
Disallow: /attachment
Disallow: /*attachment*
Disallow: /obratnaya-svyaz
Disallow: /spasibo-za-kommentariy
Disallow: /a-simple-post-with-text
Disallow: /a-post-with-an-unordered-list
Disallow: /*support*
Disallow: /support
Disallow: /our-location/

После этого у меня стали индексироваться только страницы, а статьи нет.
Что в этом списке я написал лишнее, что блокировало индексацию статей?

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Как закрыть от индексации конкретную страницу
  2. Как ускорить индексацию страниц сайта?
  3. Запрет на индексацию страниц сайта и отдельных частей контента
  4. Запрет индексации определенного URL в robots.txt без запрета последующих
  5. Индексация pdf файлов

#2

Поделиться сообщением #2



Sosnovskij

Sosnovskij
  • Администратор
  • 4 080 сообщений
  • Репутация: 609

Отправлено 16 Июнь 2013 - 23:43

Попробуйте проверить страницы статей через эту форму http://webmaster.yandex.ru/robots.xml . Если URL будут иметь статус "разрешен", то robots.txt не запрещает их индексирование.
  • 0

Не стесняйтесь ставить оценки темам :) Правила форума. Мой блог http://sosnovskij.ru/.




Оформление форума – IPBSkins.ru