Перейти к содержимому


× Быстрый вопрос
Пользователь месяца
Olya23 Olya23 1-й за Июнь
Очков активности: 1 278 3 темы, 133 сообщения, 6 баллов репутации
ТОП самых активных за этот месяц
  • Фотография web-coder
    #1

    web-coder (good-hoster.ru)
    Очков активности: 850.5 0 тем, 63 сообщения, 9 баллов репутации

  • Фотография Rodiola
    #2

    Rodiola (rukodelkovo.ru)
    Очков активности: 207 1 тема, 66 сообщений, 2 балла репутации

  • Фотография FIvYUr
    #3

    FIvYUr (moy-evroopt.ru)
    Очков активности: 84 1 тема, 25 сообщений, 2 балла репутации

  • Фотография Андрей WPMasterKZ
    #4

    Андрей WPMasterKZ (wpmaster.kz)
    Очков активности: 81 1 тема, 24 сообщения, 2 балла репутации

  • Фотография BLIK
    #5

    BLIK
    Очков активности: 79.5 Вне конкурса за определение пользователя месяца

  • Фотография Megoydagi
    #6

    Megoydagi (24ho.ru)
    Очков активности: 57 3 темы, 10 сообщений, 2 балла репутации

  • Фотография maxnik
    #7

    maxnik (konovalovpavel.ru)
    Очков активности: 48 0 тем, 16 сообщений, 2 балла репутации

  • Фотография lena220678
    #8

    lena220678
    Очков активности: 40.5 3 темы, 18 сообщений, 1 балл репутации

  • Фотография лоуренс
    #9

    лоуренс
    Очков активности: 27 3 темы, 9 сообщений, 1 балл репутации

  • Фотография WGN
    #10

    WGN (worldgamenews.com)
    Очков активности: 22.5 1 тема, 12 сообщений, 1 балл репутации

  • Показать весь ТОП 10
Поддержите форум! =)
Апдейты
  • Яндекс ИКС: 25.06.2019
  • Яндекс выдача: 12.07.2019
Топ 5 участников по репутации


Как правильно сделать robot.txt для Гугла?

#1 Kord18

Kord18
  • Пользователь
  • 60 сообщений
  • Репутация: 0
0

Отправлено 28 Декабрь 2017 - 17:04

Подскажите если ничего не указано в Роботе.txt про гугл он будет индексировать сайт в гугле?


 

 

  • 0

#2 BLIK

BLIK
  • Супермодератор
  • 4 441 сообщений
  • Репутация: 1013

Отправлено 28 Декабрь 2017 - 17:32

@Kord18,  Для Google такой же robots, как и для Яндекса, только без директивы host.


Сообщение отредактировал BLIK: 28 Декабрь 2017 - 17:33

  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#3 Kord18

Kord18
    Topic Starter
  • Пользователь
  • 60 сообщений
  • Репутация: 0

Отправлено 28 Декабрь 2017 - 17:35

@BLIK,А если в роботе не указано про гугл ничего ранжироваться сайт будет в гугле


  • 0

#4 BLIK

BLIK
  • Супермодератор
  • 4 441 сообщений
  • Репутация: 1013

Отправлено 28 Декабрь 2017 - 17:43

@Kord18,Для Google и других поисковиков задается начало в блоке правил

User-agent: *
 тут правила

А для Яндекса

User-agent: Yandex
тут правила

  • 2

Качественный хостинг   Тут может быть ваша ссылка.



#5 Sosnovskij

Sosnovskij
  • Администратор
  • 5 162 сообщений
  • Репутация: 775

Отправлено 05 Январь 2018 - 14:29

@Kord18, да, будет индексироваться.

@BLIK, по моим наблюдениям сейчас яндекс стал понимать правила host и под правилами для всех роботов (*).


  • 0

Блог — https://sosnovskij.ru/.



#6 BLIK

BLIK
  • Супермодератор
  • 4 441 сообщений
  • Репутация: 1013

Отправлено 05 Январь 2018 - 16:48

по моим наблюдениям сейчас яндекс стал понимать правила host
Я просто не пробовал так, поэтому все делаю по старинке :)  
  • 0

Качественный хостинг   Тут может быть ваша ссылка.



#7 Sosnovskij

Sosnovskij
  • Администратор
  • 5 162 сообщений
  • Репутация: 775

Отправлено 05 Январь 2018 - 17:01

@BLIK, раньше Яндекс писал, что Host понимается только юзер-агентом Yandex. Потом опытным путем выяснилось, что и под звездочкой он понимает директиву. Сейчас в мануале примеры со звездочкой :)

 

robots-min.png


  • 1

Блог — https://sosnovskij.ru/.





Похожие темы

  Название темы Автор Статистика Последнее сообщение

Оформление форума – IPBSkins.ru