Перейти к содержимому



Как правильно сделать robot.txt для Гугла?

#1 Kord18
Kord18
  • Неактивные
  • 60 сообщений
  • Репутация: 0
0

Обновлено 05 января 2018 - 17:01  Отправлено 28 декабря 2017 - 17:04

Подскажите если ничего не указано в Роботе.txt про гугл он будет индексировать сайт в гугле?


 

 

  • 0

#2 BLIK
BLIK
  • Супермодератор
  • 4 715 сообщений
  • Репутация: 1076

Отправлено 28 декабря 2017 - 17:32

@Kord18,  Для Google такой же robots, как и для Яндекса, только без директивы host.


Сообщение отредактировал BLIK: 28 декабря 2017 - 17:33

  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#3 Kord18
Kord18
    Topic Starter
  • Неактивные
  • 60 сообщений
  • Репутация: 0

Отправлено 28 декабря 2017 - 17:35

@BLIK,А если в роботе не указано про гугл ничего ранжироваться сайт будет в гугле


  • 0

#4 BLIK
BLIK
  • Супермодератор
  • 4 715 сообщений
  • Репутация: 1076

Отправлено 28 декабря 2017 - 17:43

@Kord18,Для Google и других поисковиков задается начало в блоке правил

User-agent: *
 тут правила

А для Яндекса

User-agent: Yandex
тут правила

  • 2

Качественный хостинг   Тут может быть ваша ссылка.



#5 Sosnovskij
Sosnovskij
  • Пользователь PRO
  • 5 458 сообщений
  • Репутация: 832

Отправлено 05 января 2018 - 14:29

@Kord18, да, будет индексироваться.

@BLIK, по моим наблюдениям сейчас яндекс стал понимать правила host и под правилами для всех роботов (*).


  • 0

Блог — https://sosnovskij.ru/. Добавить меня в TelegramМАГАЗИН MASTERWEBS И ПОЛЬЗОВАТЕЛЬ МЕСЯЦА ВРЕМЕННО НЕ РАБОТАЮТ.



#6 BLIK
BLIK
  • Супермодератор
  • 4 715 сообщений
  • Репутация: 1076

Отправлено 05 января 2018 - 16:48

по моим наблюдениям сейчас яндекс стал понимать правила host
Я просто не пробовал так, поэтому все делаю по старинке :)  
  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#7 Sosnovskij
Sosnovskij
  • Пользователь PRO
  • 5 458 сообщений
  • Репутация: 832

Отправлено 05 января 2018 - 17:01

@BLIK, раньше Яндекс писал, что Host понимается только юзер-агентом Yandex. Потом опытным путем выяснилось, что и под звездочкой он понимает директиву. Сейчас в мануале примеры со звездочкой :)

 

robots-min.png


  • 1

Блог — https://sosnovskij.ru/. Добавить меня в TelegramМАГАЗИН MASTERWEBS И ПОЛЬЗОВАТЕЛЬ МЕСЯЦА ВРЕМЕННО НЕ РАБОТАЮТ.





Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
DeHuC_64 DeHuC_64 1-й за Июнь
Очков активности: 33 0 тем, 22 сообщения, 1 балл репутации
Сайт: russiangreat.ru
ТОП самых активных за этот месяц
  • Фотография BuxarNET
    #1

    BuxarNET
    Очков активности: 18 1 тема, 9 сообщений, 1 балл репутации

  • Фотография HITMAN84
    #2

    HITMAN84
    Очков активности: 15 2 темы, 4 сообщения, 1 балл репутации

  • Фотография BLIK
    #3

    BLIK
    Очков активности: 13.5 0 тем, 9 сообщений, 1 балл репутации

  • Фотография DeHuC_64
    #4

    DeHuC_64 (russiangreat.ru)
    Очков активности: 12 Вне конкурса за определение пользователя месяца

  • Фотография vetalbon
    #5

    vetalbon
    Очков активности: 9 0 тем, 6 сообщений, 1 балл репутации

  • Фотография Teves
    #6

    Teves
    Очков активности: 7.5 0 тем, 5 сообщений, 1 балл репутации

  • Фотография Silver
    #7

    Silver
    Очков активности: 6 0 тем, 4 сообщения, 1 балл репутации

  • Фотография miketomlin
    #8

    miketomlin
    Очков активности: 6 0 тем, 4 сообщения, 1 балл репутации

  • Фотография Constantine
    #9

    Constantine (constantinablog.ru)
    Очков активности: 6 1 тема, 1 сообщение, 1 балл репутации

  • Фотография imvaisov
    #10

    imvaisov
    Очков активности: 4.5 1 тема, 0 сообщений, 1 балл репутации

  • Показать весь ТОП 10

Поддержите форум! =)
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru