Перейти к содержимому



Как правильно сделать robot.txt для Гугла?

#1 Kord18
Kord18
  • Пользователь
  • 60 сообщений
  • Репутация: 0
0

Отправлено 28 Декабрь 2017 - 17:04

Подскажите если ничего не указано в Роботе.txt про гугл он будет индексировать сайт в гугле?


 

 

  • 0

#2 BLIK
BLIK
  • Супермодератор
  • 4 498 сообщений
  • Репутация: 1019

Отправлено 28 Декабрь 2017 - 17:32

@Kord18,  Для Google такой же robots, как и для Яндекса, только без директивы host.


Сообщение отредактировал BLIK: 28 Декабрь 2017 - 17:33

  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#3 Kord18
Kord18
    Topic Starter
  • Пользователь
  • 60 сообщений
  • Репутация: 0

Отправлено 28 Декабрь 2017 - 17:35

@BLIK,А если в роботе не указано про гугл ничего ранжироваться сайт будет в гугле


  • 0

#4 BLIK
BLIK
  • Супермодератор
  • 4 498 сообщений
  • Репутация: 1019

Отправлено 28 Декабрь 2017 - 17:43

@Kord18,Для Google и других поисковиков задается начало в блоке правил

User-agent: *
 тут правила

А для Яндекса

User-agent: Yandex
тут правила

  • 2

Качественный хостинг   Тут может быть ваша ссылка.



#5 Sosnovskij
Sosnovskij
  • Администратор
  • 5 229 сообщений
  • Репутация: 783

Отправлено 05 Январь 2018 - 14:29

@Kord18, да, будет индексироваться.

@BLIK, по моим наблюдениям сейчас яндекс стал понимать правила host и под правилами для всех роботов (*).


  • 0

Блог — https://sosnovskij.ru/. Добавить меня в TelegramTwitterFacebook.



#6 BLIK
BLIK
  • Супермодератор
  • 4 498 сообщений
  • Репутация: 1019

Отправлено 05 Январь 2018 - 16:48

по моим наблюдениям сейчас яндекс стал понимать правила host
Я просто не пробовал так, поэтому все делаю по старинке :)  
  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#7 Sosnovskij
Sosnovskij
  • Администратор
  • 5 229 сообщений
  • Репутация: 783

Отправлено 05 Январь 2018 - 17:01

@BLIK, раньше Яндекс писал, что Host понимается только юзер-агентом Yandex. Потом опытным путем выяснилось, что и под звездочкой он понимает директиву. Сейчас в мануале примеры со звездочкой :)

 

robots-min.png


  • 1

Блог — https://sosnovskij.ru/. Добавить меня в TelegramTwitterFacebook.





Похожие темы
  Название темы Автор Статистика Последнее сообщение

× Быстрый вопрос
Пользователь месяца
Rodiola Rodiola 1-й за Август
Очков активности: 1 552 3 темы, 106 сообщений, 9 баллов репутации
Сайт: rukodelkovo.ru
ТОП самых активных за этот месяц
  • Фотография MattCutts
    #1

    MattCutts (dmitrylee.ru)
    Очков активности: 480 5 тем, 65 сообщений, 4 балла репутации

  • Фотография Андрей WPM
    #2

    Андрей WPM (wpmaster.kz)
    Очков активности: 378 Вне конкурса за определение пользователя месяца

  • Фотография Chaser
    #3

    Chaser (majento.ru)
    Очков активности: 33 1 тема, 8 сообщений, 2 балла репутации

  • Фотография lena220678
    #4

    lena220678
    Очков активности: 33 1 тема, 19 сообщений, 1 балл репутации

  • Фотография BLIK
    #5

    BLIK
    Очков активности: 27 0 тем, 18 сообщений, 1 балл репутации

  • Фотография Rodiola
    #6

    Rodiola (rukodelkovo.ru)
    Очков активности: 22.5 Вне конкурса за определение пользователя месяца

  • Фотография maxnik
    #7

    maxnik (konovalovpavel.ru)
    Очков активности: 21 0 тем, 7 сообщений, 2 балла репутации

  • Фотография Constantine
    #8

    Constantine (constantine.video.blog)
    Очков активности: 18 2 темы, 6 сообщений, 1 балл репутации

  • Фотография Megoydagi
    #9

    Megoydagi (24ho.ru)
    Очков активности: 16.5 1 тема, 8 сообщений, 1 балл репутации

  • Фотография NataliaAntalia
    #10

    NataliaAntalia (zdorovemedicina.ru)
    Очков активности: 15 0 тем, 10 сообщений, 1 балл репутации

  • Показать весь ТОП 10
Поддержите форум! =)
Апдейты
  • Яндекс ИКС: 27.08.2019
  • Яндекс выдача: 15.09.2019
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru