Перейти к содержимому



Описание веб-страницы недоступно из-за ограничений в файле robots.txt

#1 Костик

Костик
  • Неактивные
  • 22 сообщений
  • Репутация: 0
0

Отправлено 01 Ноябрь 2012 - 14:58

"Описание веб-страницы недоступно из-за ограничений в файле robots.txt" вот такую мне выдал запись гугл, кто сталкивался с таким? Что это значит и что с этим делать? Как можно закрыть страницы для индексации поисковыми роботами, я запутался?

 

 

  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85
Советую обратить внимание на следующее:
  1. Разрешить поисковым системам индексировать сайт
  2. Robots.txt - что такое и как им правильно пользоваться
  3. Как настроить файл robots.txt на сайте написанного на php
  4. Googlebot не может получить доступ к файлам CSS и JS на сайте
  5. Почему индексируются закрытые страницы

#2 Svetka

Svetka
  • Неактивные
  • 27 сообщений
  • Репутация: 0

Отправлено 01 Ноябрь 2012 - 15:11

Если ты закрыл страницы для индексации гуглом, но их индексируют другие поисковые роботы, то такой прикол бывает. То есть гугл видит урлы на других поисковых системах и автоматом их добавляет в свою систему выдачи. Поэтому надо дополнительно ставить тег noindex.
  • 0


Оформление форума – IPBSkins.ru