Перейти к содержимому



Файл robots.txt получил статус некачественного

#1 алексс
алексс
  • Пользователь
  • 19 сообщений
  • Репутация: 0
0

Отправлено 14 Ноябрь 2018 - 15:05

Здравствуйте. Не подскажите в чем ошибка . Файл стал некачественный в глазах вебмастера яндекс. Кажется раньше было нормально а сейчас файл исключили как некачественный

User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site/sitemap.xml

 

 

  • 0

#2 BLIK
BLIK
  • Супермодератор
  • 4 539 сообщений
  • Репутация: 1037

Отправлено 14 Ноябрь 2018 - 15:22

@алексс,Так и правильно исключили, так как robots и не должен быть в поисковой выдачи со страницами. 

Главное чтобы он был доступен для поисковиков. Можно в разделе проверка robots посмотреть видят его и есть ли доступ к файлу.


  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#3 Ixman
Ixman
  • Пользователь PRO
  • 3 167 сообщений
  • Репутация: 842

Отправлено 14 Ноябрь 2018 - 15:26

Disallow:

 

это как минимум странно, если в этой директиве ничего не указано, то и добавлять её в файл robots.txt не нужно 


  • 0


#4 алексс
алексс
    Topic Starter
  • Пользователь
  • 19 сообщений
  • Репутация: 0

Отправлено 14 Ноябрь 2018 - 17:03

а вот так можно оставить исправил

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

  • 0

#5 алексс
алексс
    Topic Starter
  • Пользователь
  • 19 сообщений
  • Репутация: 0

Отправлено 14 Ноябрь 2018 - 17:20

я не собирался исключать  какие то тексты или страницы   -главное чтобы был файл robots вот поправил может такой пойдет

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал Sosnovskij: 15 Ноябрь 2018 - 12:14

  • 0

#6 алексс
алексс
    Topic Starter
  • Пользователь
  • 19 сообщений
  • Репутация: 0

Отправлено 14 Ноябрь 2018 - 18:01

а может так сделать мне страницы и текст закрывать не нужно
 
User-agent:
 
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
 
или так
 
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал алексс: 14 Ноябрь 2018 - 18:03

  • 0

#7 алексс
алексс
    Topic Starter
  • Пользователь
  • 19 сообщений
  • Репутация: 0

Отправлено 14 Ноябрь 2018 - 20:15

остановился на 3 вариантах файла, какой правильнее на ваш взгляд?

 

User-agent:
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

  • 0

#8 Ixman
Ixman
  • Пользователь PRO
  • 3 167 сообщений
  • Репутация: 842

Отправлено 15 Ноябрь 2018 - 09:47

@алексс, директивы пустыми не должны быть. У вас либо User-Agent. либо Disallow пустые.  Если ничего закрывать не нужно, то хватит и такого содержимого

User-agent: *
Host: site.ru
Sitemap: http://site.ru/sitemap.xml  

  • 1


#9 алексс
алексс
    Topic Starter
  • Пользователь
  • 19 сообщений
  • Репутация: 0

Отправлено 15 Ноябрь 2018 - 13:32

спасибо большое!


  • 0

#10 ShowPrint
ShowPrint
  • Пользователь PRO
  • 3 371 сообщений
  • Репутация: 975

Отправлено 15 Ноябрь 2018 - 17:09

Host: site.ru

Если у меня ещё не начался старческий маразм и я ничего не путаю, то вродь как директива Host поддерживалась только Тындексом и в марте они отказались от неё, то есть данную строку можно не писать совсем.

 

Если напишите, то ничего страшного не произойдёт - многие пишут "по привычке"...


  • 1
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#11 Olya23
Olya23
  • Пользователь
  • 1 031 сообщений
  • Репутация: 70

Отправлено 09 Декабрь 2018 - 16:17

В Disallow: необходимо прописать все, что запрещено для индексирования - технические страницы, доступ а админку, страницы пагинации. 


  • 0


robot
robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
NataliaAntalia NataliaAntalia 1-й за Октябрь
Очков активности: 480 2 темы, 58 сообщений, 5 баллов репутации
Сайт: zdorovemedicina.ru
ТОП самых активных за этот месяц
  • Фотография ShowPrint
    #1

    ShowPrint (ShowPrint.ru)
    Очков активности: 297 0 тем, 18 сообщений, 11 баллов репутации

  • Фотография BLIK
    #2

    BLIK
    Очков активности: 157.5 0 тем, 15 сообщений, 7 баллов репутации

  • Фотография NataliaAntalia
    #3

    NataliaAntalia (zdorovemedicina.ru)
    Очков активности: 132 Вне конкурса за определение пользователя месяца

  • Фотография Megoydagi
    #4

    Megoydagi (24ho.ru)
    Очков активности: 130.5 5 тем, 14 сообщений, 3 балла репутации

  • Фотография Vmir
    #5

    Vmir
    Очков активности: 126 2 темы, 15 сообщений, 4 балла репутации

  • Фотография Totti
    #6

    Totti
    Очков активности: 126 0 тем, 14 сообщений, 6 баллов репутации

  • Фотография MattCutts
    #7

    MattCutts (dmitrylee.ru)
    Очков активности: 99 Вне конкурса за определение пользователя месяца

  • Фотография miketomlin
    #8

    miketomlin
    Очков активности: 45 0 тем, 10 сообщений, 3 балла репутации

  • Фотография TimurR
    #9

    TimurR
    Очков активности: 39 3 темы, 4 сообщения, 2 балла репутации

  • Фотография kolver
    #10

    kolver
    Очков активности: 21 3 темы, 5 сообщений, 1 балл репутации

  • Показать весь ТОП 10
Поддержите форум! =)
Апдейты
  • Яндекс ИКС: 29.10.2019
  • Яндекс выдача: 14.11.2019
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru