Перейти к содержимому



Файл robots.txt получил статус некачественного

#1 алексс
алексс
  • Неактивные
  • 19 сообщений
  • Репутация: 0
0

Обновлено 09 декабря 2018 - 16:17  Отправлено 14 ноября 2018 - 15:05

Здравствуйте. Не подскажите в чем ошибка . Файл стал некачественный в глазах вебмастера яндекс. Кажется раньше было нормально а сейчас файл исключили как некачественный

User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site/sitemap.xml

 

 

  • 0

#2 BLIK
BLIK
  • Супермодератор
  • 4 701 сообщений
  • Репутация: 1072

Отправлено 14 ноября 2018 - 15:22

@алексс,Так и правильно исключили, так как robots и не должен быть в поисковой выдачи со страницами. 

Главное чтобы он был доступен для поисковиков. Можно в разделе проверка robots посмотреть видят его и есть ли доступ к файлу.


  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#3 Ixman
Ixman
  • Пользователь PRO
  • 3 173 сообщений
  • Репутация: 848

Отправлено 14 ноября 2018 - 15:26

Disallow:

 

это как минимум странно, если в этой директиве ничего не указано, то и добавлять её в файл robots.txt не нужно 


  • 0


#4 алексс
алексс
    Topic Starter
  • Неактивные
  • 19 сообщений
  • Репутация: 0

Отправлено 14 ноября 2018 - 17:03

а вот так можно оставить исправил

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

  • 0

#5 алексс
алексс
    Topic Starter
  • Неактивные
  • 19 сообщений
  • Репутация: 0

Отправлено 14 ноября 2018 - 17:20

я не собирался исключать  какие то тексты или страницы   -главное чтобы был файл robots вот поправил может такой пойдет

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал Sosnovskij: 15 ноября 2018 - 12:14

  • 0

#6 алексс
алексс
    Topic Starter
  • Неактивные
  • 19 сообщений
  • Репутация: 0

Отправлено 14 ноября 2018 - 18:01

а может так сделать мне страницы и текст закрывать не нужно
 
User-agent:
 
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
 
или так
 
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал алексс: 14 ноября 2018 - 18:03

  • 0

#7 алексс
алексс
    Topic Starter
  • Неактивные
  • 19 сообщений
  • Репутация: 0

Отправлено 14 ноября 2018 - 20:15

остановился на 3 вариантах файла, какой правильнее на ваш взгляд?

 

User-agent:
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

  • 0

#8 Ixman
Ixman
  • Пользователь PRO
  • 3 173 сообщений
  • Репутация: 848

Отправлено 15 ноября 2018 - 09:47

@алексс, директивы пустыми не должны быть. У вас либо User-Agent. либо Disallow пустые.  Если ничего закрывать не нужно, то хватит и такого содержимого

User-agent: *
Host: site.ru
Sitemap: http://site.ru/sitemap.xml  

  • 1


#9 алексс
алексс
    Topic Starter
  • Неактивные
  • 19 сообщений
  • Репутация: 0

Отправлено 15 ноября 2018 - 13:32

спасибо большое!


  • 0

#10 ShowPrint
ShowPrint
  • Пользователь PRO
  • 3 406 сообщений
  • Репутация: 1001

Отправлено 15 ноября 2018 - 17:09

Host: site.ru

Если у меня ещё не начался старческий маразм и я ничего не путаю, то вродь как директива Host поддерживалась только Тындексом и в марте они отказались от неё, то есть данную строку можно не писать совсем.

 

Если напишите, то ничего страшного не произойдёт - многие пишут "по привычке"...


  • 1
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#11 Olya23
Olya23
  • Пользователь
  • 1 037 сообщений
  • Репутация: 71

Отправлено 09 декабря 2018 - 16:17

В Disallow: необходимо прописать все, что запрещено для индексирования - технические страницы, доступ а админку, страницы пагинации. 


  • 0


robot
robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
albedo albedo 1-й за Май
Очков активности: 198 5 тем, 29 сообщений, 3 балла репутации
Сайт: online24news.ru
ТОП самых активных за этот месяц
  • Фотография maks200
    #1

    maks200
    Очков активности: 6 1 тема, 1 сообщение, 1 балл репутации

  • Фотография NewBlade
    #2

    NewBlade
    Очков активности: 6 1 тема, 1 сообщение, 1 балл репутации

  • Фотография Movut
    #3

    Movut (seo-aspirant.ru)
    Очков активности: 4.5 1 тема, 0 сообщений, 1 балл репутации

  • Фотография 1head
    #4

    1head
    Очков активности: 4.5 1 тема, 0 сообщений, 1 балл репутации

  • Фотография magnet
    #5

    magnet (rbfxdirect.com)
    Очков активности: 4.5 1 тема, 0 сообщений, 1 балл репутации

  • Фотография Zevss
    #6

    Zevss (domles43.ru)
    Очков активности: 4.5 1 тема, 0 сообщений, 1 балл репутации

  • Фотография Nik_2266999
    #7

    Nik_2266999
    Очков активности: 3 0 тем, 2 сообщения, 1 балл репутации

  • Фотография narolskay
    #8

    narolskay (ortopedicheskaja-podushka.ru)
    Очков активности: 3 0 тем, 2 сообщения, 1 балл репутации

  • Фотография wp01
    #9

    wp01
    Очков активности: 3 0 тем, 2 сообщения, 1 балл репутации

  • Фотография getsend
    #10

    getsend
    Очков активности: 3 0 тем, 2 сообщения, 1 балл репутации

  • Показать весь ТОП 10

Поддержите форум! =)
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru