Перейти к содержимому


Пользователь месяца
Андрей WPMasterKZ Андрей WPMasterKZ 1-й за Ноябрь
Очков активности: 888 1 тема, 71 сообщение, 8 баллов репутации
Сайт: wpmaster.kz
ТОП самых активных за этот месяц
  • Фотография OlgaGetman
    #1

    OlgaGetman
    Очков активности: 328.5 4 темы, 61 сообщение, 3 балла репутации

  • Фотография Mandarin
    #2

    Mandarin
    Очков активности: 195 3 темы, 56 сообщений, 2 балла репутации

  • Фотография TimurR
    #3

    TimurR
    Очков активности: 45 Вне конкурса за определение пользователя месяца

  • Фотография BLIK
    #4

    BLIK
    Очков активности: 39 0 тем, 13 сообщений, 2 балла репутации

  • Фотография Rodiola
    #5

    Rodiola
    Очков активности: 36 1 тема, 9 сообщений, 2 балла репутации

  • Фотография thisismyname
    #6

    thisismyname
    Очков активности: 27 4 темы, 6 сообщений, 1 балл репутации

  • Фотография Андрей WPMasterKZ
    #7

    Андрей WPMasterKZ (wpmaster.kz)
    Очков активности: 22.5 Вне конкурса за определение пользователя месяца

  • Фотография m3Re
    #8

    m3Re
    Очков активности: 22.5 2 темы, 9 сообщений, 1 балл репутации

  • Фотография DannyaRI1
    #9

    DannyaRI1
    Очков активности: 16.5 1 тема, 8 сообщений, 1 балл репутации

  • Фотография WGN
    #10

    WGN (worldgamenews.com)
    Очков активности: 15 Вне конкурса за определение пользователя месяца

  • Показать весь ТОП 10
Поддержите форум! =)
Апдейты
  • Яндекс ИКС: 29.11.2018
  • Яндекс выдача: 09.12.2018
Топ 5 участников по репутации


Файл robots.txt получил статус некачественного

#1 алексс

алексс
  • Пользователь
  • 14 сообщений
  • Репутация: 0
0

Отправлено 14 November 2018 - 15:05

Здравствуйте. Не подскажите в чем ошибка . Файл стал некачественный в глазах вебмастера яндекс. Кажется раньше было нормально а сейчас файл исключили как некачественный

User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site/sitemap.xml

 

 

  • 0

#2 BLIK

BLIK
  • Супермодератор
  • 4184 сообщений
  • Репутация: 951

Отправлено 14 November 2018 - 15:22

@алексс,Так и правильно исключили, так как robots и не должен быть в поисковой выдачи со страницами. 

Главное чтобы он был доступен для поисковиков. Можно в разделе проверка robots посмотреть видят его и есть ли доступ к файлу.


  • 0


#3 Ixman

Ixman
  • Пользователь PRO
  • 2973 сообщений
  • Репутация: 775

Отправлено 14 November 2018 - 15:26

Disallow:

 

это как минимум странно, если в этой директиве ничего не указано, то и добавлять её в файл robots.txt не нужно 


  • 0


#4 алексс

алексс
    Topic Starter
  • Пользователь
  • 14 сообщений
  • Репутация: 0

Отправлено 14 November 2018 - 17:03

а вот так можно оставить исправил

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

  • 0

#5 алексс

алексс
    Topic Starter
  • Пользователь
  • 14 сообщений
  • Репутация: 0

Отправлено 14 November 2018 - 17:20

я не собирался исключать  какие то тексты или страницы   -главное чтобы был файл robots вот поправил может такой пойдет

User-agent:
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал Sosnovskij: 15 November 2018 - 12:14

  • 0

#6 алексс

алексс
    Topic Starter
  • Пользователь
  • 14 сообщений
  • Репутация: 0

Отправлено 14 November 2018 - 18:01

а может так сделать мне страницы и текст закрывать не нужно
 
User-agent:
 
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
 
или так
 
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml

Сообщение отредактировал алексс: 14 November 2018 - 18:03

  • 0

#7 алексс

алексс
    Topic Starter
  • Пользователь
  • 14 сообщений
  • Репутация: 0

Отправлено 14 November 2018 - 20:15

остановился на 3 вариантах файла, какой правильнее на ваш взгляд?

 

User-agent:
Disallow: /core/.
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:
*
Host: site.ru
Sitemap: http://site/sitemap.xml
User-agent:Yandex
Disallow:
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

  • 0

#8 Ixman

Ixman
  • Пользователь PRO
  • 2973 сообщений
  • Репутация: 775

Отправлено 15 November 2018 - 09:47

@алексс, директивы пустыми не должны быть. У вас либо User-Agent. либо Disallow пустые.  Если ничего закрывать не нужно, то хватит и такого содержимого

User-agent: *
Host: site.ru
Sitemap: http://site.ru/sitemap.xml  

  • 1


#9 алексс

алексс
    Topic Starter
  • Пользователь
  • 14 сообщений
  • Репутация: 0

Отправлено 15 November 2018 - 13:32

спасибо большое!


  • 0

#10 ShowPrint

ShowPrint
  • Пользователь PRO
  • 3084 сообщений
  • Репутация: 850

Отправлено 15 November 2018 - 17:09

Host: site.ru

Если у меня ещё не начался старческий маразм и я ничего не путаю, то вродь как директива Host поддерживалась только Тындексом и в марте они отказались от неё, то есть данную строку можно не писать совсем.

 

Если напишите, то ничего страшного не произойдёт - многие пишут "по привычке"...


  • 1
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#11 OlgaGetman

OlgaGetman
  • Пользователь
  • 91 сообщений
  • Репутация: 4

Отправлено Вчера, 16:17

В Disallow: необходимо прописать все, что запрещено для индексирования - технические страницы, доступ а админку, страницы пагинации. 


  • 0

robot

robot
  • Пользователь PRO
  • 2652 сообщений
  • Репутация: 85


Похожие темы

  Название темы Автор Статистика Последнее сообщение

Оформление форума – IPBSkins.ru