Перейти к содержимому



Стоит ли беспокоиться? Ошибки в Google Search Console

#1 Julianna
Julianna
  • Пользователь
  • 15 сообщений
  • Репутация: 0
0

Отправлено 26 января 2020 - 12:00

Здравствуйте! Уже какой месяц наблюдаю на Google Console несколько ошибок

  1.  Проиндексировано, несмотря на блокировку в файле robots.txt (На сайте 816 страниц - ошибочных страниц 251. Попадают туда страницы из сайта, которые я запретила индексировать в SEO плагине и в robots.txt. Также, страницы в окончание ссылки которых /feed)
  2. Страница, связанная с отправленным URL, содержит тег noindex (Попали рубрики, которые находятся в noindex)

Ошибка №2 только на одном моем сайте, а вот ошибка №1 во всех сайтах. Стоит ли, беспокоится? Или же это ошибка ботов гугла?


 

Хотя во всех сайтах одинаковые настройки и robots.txt, но проиндексированных, несмотря на блокировку в файле robots.txt где-то 16, где-то 303, а где-то целых 600. Страницы во всех сайтах в районе 1000.

 

  • 0

#2 Totti
Totti
  • Пользователь
  • 304 сообщений
  • Репутация: 95

Отправлено 26 января 2020 - 12:38

Стоит ли, беспокоится? Или же это ошибка ботов гугла?

 

Бывает и боты шалят.  :D

 

Лично я когда вношу всякие правки в плагин или файл robots.txt сразу же проверяю их в панели Вебмастера на возможность индексирования страницы.

 

test-webmaster.jpg

 

Ещё как вариант проверить корректную работу и вывод 404-ошибки при вводе несуществующего URL-адреса.

 

Возможно роботы Google быстро шустрят сайт и могло случиться к примеру так: Вы открыли врата рая для краулера B) (документы для индексирования стали открыты паукам), однако он ещё не успел вовремя занести в реестр документы в свою базу. Робот пробежался, занес их (авансом), а вы тем временем только закончили вносить правки в корректный файл robots.txt. (это как один из вариантов).

 

Часто замечаю в своей работе, когда программист при тестировании основных проектов на поддоменах забывает поставить диррективу Disallow: /, обнаруживается неприятная петрушка = тонны страниц в индексе, и это при том что на сайте либо отсутствовал robots.txt либо не внесены диррективы.

 

Всякий шлак рекомендуется заранее закрывать (регистрация, корзина, политика конфиденциальности информации, utm-метки, авторы контента из учетной записи). Про страницы пагинации не буду писать т.к. здесь мнения могут разделиться и есть как плюсы от таких страниц и минусы на крупных проектах.


  • 1

#3 albedo
albedo
  • Пользователь
  • 642 сообщений
  • Репутация: 84

Отправлено 26 января 2020 - 13:27

@Totti, я темку тут создавал

https://www.masterwe...aile-robotstxt/

если разбираетесь, можете помочь советом?


  • 0


#4 Totti
Totti
  • Пользователь
  • 304 сообщений
  • Репутация: 95

Отправлено 26 января 2020 - 13:46

если разбираетесь, можете помочь советом?
 

Проверь тему, посылка ждет своего получателя  :D


  • 0

#5 Julianna
Julianna
    Topic Starter
  • Пользователь
  • 15 сообщений
  • Репутация: 0

Отправлено 26 января 2020 - 14:16

@Totti, Спасибо) Редактировала robot.txt на сайтах и отправила ошибки на проверку. 


  • 0



Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
DeHuC_64 DeHuC_64 1-й за Июнь
Очков активности: 33 0 тем, 22 сообщения, 1 балл репутации
Сайт: russiangreat.ru
ТОП самых активных за этот месяц
  • Фотография DeHuC_64
    #1

    DeHuC_64 (russiangreat.ru)
    Очков активности: 55.5 Вне конкурса за определение пользователя месяца

  • Фотография BLIK
    #2

    BLIK
    Очков активности: 54 0 тем, 18 сообщений, 2 балла репутации

  • Фотография BuxarNET
    #3

    BuxarNET
    Очков активности: 21 1 тема, 11 сообщений, 1 балл репутации

  • Фотография HITMAN84
    #4

    HITMAN84
    Очков активности: 21 3 темы, 5 сообщений, 1 балл репутации

  • Фотография vetalbon
    #5

    vetalbon
    Очков активности: 13.5 0 тем, 9 сообщений, 1 балл репутации

  • Фотография павелЯ
    #6

    павелЯ
    Очков активности: 10.5 1 тема, 4 сообщения, 1 балл репутации

  • Фотография doktorcrabus
    #7

    doktorcrabus
    Очков активности: 9 1 тема, 3 сообщения, 1 балл репутации

  • Фотография imvaisov
    #8

    imvaisov
    Очков активности: 9 2 темы, 0 сообщений, 1 балл репутации

  • Фотография Constantine
    #9

    Constantine (constantinablog.ru)
    Очков активности: 7.5 1 тема, 2 сообщения, 1 балл репутации

  • Фотография miketomlin
    #10

    miketomlin
    Очков активности: 7.5 0 тем, 5 сообщений, 1 балл репутации

  • Показать весь ТОП 10

Поддержите форум! =)
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru