X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
> Robots
m0tti
m0tti
Topic Starter сообщение 9.6.2009, 2:15; Ответить: m0tti
Сообщение #1


Мне в принципе скрывать нечего, или я не знаю что скрывать. Но у меня его нет, имеет ли смысл создавать чистый или оставить так как есть?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
НЕПЛОХОЙ
НЕПЛОХОЙ
сообщение 9.6.2009, 4:04; Ответить: НЕПЛОХОЙ
Сообщение #2


кстати, по этому же файлу хотел спросить, многие называют папку админ-панели как то необычно, чтобы не смогли ее найти, а если она будет прописана в robots.txt то толку то ее скрывать? а в админке поисковикам делать нефиг...

админка конечно хорошо защищена паролем, но все таки уже глубоко въелось что надо админку прятать.

так вот, админку надо прописывать в роботс.тхт или нет? я нигде не видел чтоб прописывали
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ZiTosS
ZiTosS
сообщение 9.6.2009, 11:45; Ответить: ZiTosS
Сообщение #3


m0tti, можно создать и пустой, это идентично:
User-agent: *
Disallow:

т.е. Разрешить всем роботам индексировать весь сайт

Евгений, во многих движках не скрывают папку панели управления. Например в Joomla robots.txt:
User-agent: *
Disallow: /administrator/

Да зафиг прятать админку. Если человек захочет, то потрудившись он всё равно взломает ваш сайт. Уж не найдет вашу админку, так XSS, SQL-инъекции, SSH-доступ и много чего можно придумать
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
JulyMoor
JulyMoor
сообщение 31.5.2010, 19:17; Ответить: JulyMoor
Сообщение #4


"Если человек захочет, то потрудившись он всё равно взломает ваш сайт"

вы чего?? это ж для пс вы прячете, а не от людей :) зачем роботу индексировать админку???? также как метки, архивы, некоторые рубрики закрывают, чтоб дублей не было..
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
zatusy
zatusy
сообщение 1.6.2010, 0:41; Ответить: zatusy
Сообщение #5


в robot лучше ещё прописать какой домен у вас главный с www или без т.к. при индексации бывают проблемы...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
webp001
webp001
сообщение 14.6.2010, 17:32; Ответить: webp001
Сообщение #6


Конечно лучше прятать те страницы, от которых нету смысла в поисковой выдаче.
Правильно составление робота для яндекса дано ниже.
User-Agent: *
Disallow: / (надо обязательно указать какую нибудь дерикторию, чтобы бот понял, что тут не какой то говно сайт, и есть материалы которую ненужны в поисковой выдаче)
Host: www.ваш сайт.ru (дериктиву хост указываем с префиксом www, или без, смотря как в панели вебмастера добавлен ваш сайт)
Sitemap: http://www.ваш сайт.ru/sitemap.xml (ну и конечно карта сайта, которую надо пинговать при изменение на сайте, так же как и канал rss)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Matt
Matt
сообщение 14.6.2010, 20:01; Ответить: Matt
Сообщение #7


Для блогов и вообще везде, где используются теги и поиск по ним, необходимо их закрывать от индексации обязательно.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
webp001
webp001
сообщение 15.6.2010, 0:31; Ответить: webp001
Сообщение #8


Для яндекса лучше закрыть, гуглу всё равно (он питается почти всем, яндекс же у нас придирается к контенту)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Matt
Matt
сообщение 15.6.2010, 23:45; Ответить: Matt
Сообщение #9


Пусть себе питается, дубли всё равно не стоит плодить.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
pechenki_mw
pechenki_mw
сообщение 25.7.2010, 1:03; Ответить: pechenki_mw
Сообщение #10


А что будет, если вообще файла робот не создавать? это как-то повлияет на поисковые машины или еще что-нить...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
3 страниц V   1 2 3 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 2187 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Работы по файлу robots.txt
8 tankoff 3679 19.3.2016, 20:02
автор: tankoff


 



RSS Текстовая версия Сейчас: 28.3.2024, 23:32
Дизайн