Перейти к содержимому



Стоит ли беспокоиться? Ошибки в Google Search Console

#1 Julianna
Julianna
  • Пользователь
  • 15 сообщений
  • Репутация: 0
0

Отправлено 26 Январь 2020 - 12:00

Здравствуйте! Уже какой месяц наблюдаю на Google Console несколько ошибок

  1.  Проиндексировано, несмотря на блокировку в файле robots.txt (На сайте 816 страниц - ошибочных страниц 251. Попадают туда страницы из сайта, которые я запретила индексировать в SEO плагине и в robots.txt. Также, страницы в окончание ссылки которых /feed)
  2. Страница, связанная с отправленным URL, содержит тег noindex (Попали рубрики, которые находятся в noindex)

Ошибка №2 только на одном моем сайте, а вот ошибка №1 во всех сайтах. Стоит ли, беспокоится? Или же это ошибка ботов гугла?


 

Хотя во всех сайтах одинаковые настройки и robots.txt, но проиндексированных, несмотря на блокировку в файле robots.txt где-то 16, где-то 303, а где-то целых 600. Страницы во всех сайтах в районе 1000.

 

  • 0

#2 Totti
Totti
  • Пользователь
  • 269 сообщений
  • Репутация: 82

Отправлено 26 Январь 2020 - 12:38

Стоит ли, беспокоится? Или же это ошибка ботов гугла?

 

Бывает и боты шалят.  :D

 

Лично я когда вношу всякие правки в плагин или файл robots.txt сразу же проверяю их в панели Вебмастера на возможность индексирования страницы.

 

test-webmaster.jpg

 

Ещё как вариант проверить корректную работу и вывод 404-ошибки при вводе несуществующего URL-адреса.

 

Возможно роботы Google быстро шустрят сайт и могло случиться к примеру так: Вы открыли врата рая для краулера B) (документы для индексирования стали открыты паукам), однако он ещё не успел вовремя занести в реестр документы в свою базу. Робот пробежался, занес их (авансом), а вы тем временем только закончили вносить правки в корректный файл robots.txt. (это как один из вариантов).

 

Часто замечаю в своей работе, когда программист при тестировании основных проектов на поддоменах забывает поставить диррективу Disallow: /, обнаруживается неприятная петрушка = тонны страниц в индексе, и это при том что на сайте либо отсутствовал robots.txt либо не внесены диррективы.

 

Всякий шлак рекомендуется заранее закрывать (регистрация, корзина, политика конфиденциальности информации, utm-метки, авторы контента из учетной записи). Про страницы пагинации не буду писать т.к. здесь мнения могут разделиться и есть как плюсы от таких страниц и минусы на крупных проектах.


  • 1

#3 albedo
albedo
  • Пользователь
  • 576 сообщений
  • Репутация: 80

Отправлено 26 Январь 2020 - 13:27

@Totti, я темку тут создавал

https://www.masterwe...aile-robotstxt/

если разбираетесь, можете помочь советом?


  • 0

Что вообще в мире творится? Онлайн Новости



#4 Totti
Totti
  • Пользователь
  • 269 сообщений
  • Репутация: 82

Отправлено 26 Январь 2020 - 13:46

если разбираетесь, можете помочь советом?
 

Проверь тему, посылка ждет своего получателя  :D


  • 0

#5 Julianna
Julianna
    Topic Starter
  • Пользователь
  • 15 сообщений
  • Репутация: 0

Отправлено 26 Январь 2020 - 14:16

@Totti, Спасибо) Редактировала robot.txt на сайтах и отправила ошибки на проверку. 


  • 0



Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
Totti Totti 1-й за Январь
Очков активности: 3 937 6 тем, 87 сообщений, 25 баллов репутации
ТОП самых активных за этот месяц
  • Фотография Megoydagi
    #1

    Megoydagi (24ho.ru)
    Очков активности: 502.5 5 тем, 52 сообщения, 5 баллов репутации

  • Фотография NataliaAntalia
    #2

    NataliaAntalia (zdorovemedicina.ru)
    Очков активности: 139.5 Вне конкурса за определение пользователя месяца

  • Фотография BLIK
    #3

    BLIK
    Очков активности: 76.5 Вне конкурса за определение пользователя месяца

  • Фотография magnet
    #4

    magnet (rbfxdirect.com)
    Очков активности: 55.5 2 темы, 31 сообщение, 1 балл репутации

  • Фотография albedo
    #5

    albedo (online24news.ru)
    Очков активности: 34.5 1 тема, 20 сообщений, 1 балл репутации

  • Фотография TindrumGM
    #6

    TindrumGM (novosti-land.ru)
    Очков активности: 28.5 5 тем, 4 сообщения, 1 балл репутации

  • Фотография MattCutts
    #7

    MattCutts (dmitrylee.ru)
    Очков активности: 22.5 Вне конкурса за определение пользователя месяца

  • Фотография Totti
    #8

    Totti
    Очков активности: 21 Вне конкурса за определение пользователя месяца

  • Фотография kolver
    #9

    kolver
    Очков активности: 21 2 темы, 8 сообщений, 1 балл репутации

  • Фотография Step01
    #10

    Step01
    Очков активности: 19.5 2 темы, 7 сообщений, 1 балл репутации

  • Показать весь ТОП 10
Поддержите форум! =)
Апдейты
  • Яндекс ИКС: 30.01.2020
  • Яндекс выдача: 23.02.2020
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru