X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Robots.txt
thisfil
thisfil
Topic Starter сообщение 22.2.2008, 16:31; Ответить: thisfil
Сообщение #1


Как правильно писать этот фаил?

Для чего он нужен? (Я конечно знаю, но не понимаю зачем
что либо закрывать от бота?)

Какие нужно соблюдать правила при написании этого фаила? И как его вопче писать?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Гость_0_* Гость_0_*
сообщение 22.2.2008, 18:29; Ответить: Гость_0_*
Сообщение #2


Ну начать нужно с того, что не robot.txt, а robots.txt.
Размещать файл robots.txt нужно в корень сайта, в нём нужно прописывать так называемые исключения для поисковых роботов. Разделять эти исключения нужно пустой строчкой.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ZiTosS
ZiTosS
сообщение 23.2.2008, 5:04; Ответить: ZiTosS
Сообщение #3


Дабы не копипастить, дам вам ссылку на прочтнение...
http://ru.wikipedia.org/wiki/Robots.txt

И ещё, полно видел полезной инфы связанной с robots.txt стоит поискать в яше или гугле
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Гость_0_* Гость_0_*
сообщение 4.5.2009, 19:17; Ответить: Гость_0_*
Сообщение #4


Подскажите пожалуйста. Почему в статистике просмотров - Яндексом каждый день 1
Вот : http://vladivostok.fm/robot.txt
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Galeodor
Galeodor
сообщение 4.5.2009, 20:13; Ответить: Galeodor
Сообщение #5


может потому что 1 раз смотрит?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ZiTosS
ZiTosS
сообщение 4.5.2009, 20:13; Ответить: ZiTosS
Сообщение #6


vladivostok.fm,
1) прочитайте второе сообщение:
Ну начать нужно с того, что не robot.txt, а robots.txt....

2) Allow - нет такой директивы, есть только Disallow

И вопроса не понял? Вы в счётчике Liveinternet смотрите? Вообще там вроде нету такой статистики, как просмотр вашей страницы ботами. А если быть точным, то файл robots.txt никак не влияет на посещалку вашего сайта. Файл создан для роботов поисковых систем, а не для пользователей.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
stelepun
stelepun
сообщение 4.5.2009, 22:35; Ответить: stelepun
Сообщение #7


(ZiTosS @ 4.5.2009, 19:13) *
2) Allow - нет такой директивы, есть только Disallow

Вот вы пишите, что директивы Allow нет, а в указанной вами статье в Википедии написано:
Allow: имеет действие, обратное директиве Disallow — разрещает доступ к определенной части ресурса.

Кроме того в разделе Яндекс.Вебмастер Использование robots.txt есть пункт "2. Использование директив Disallow и Allow", в котором подробно описывается использование данной директивы.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
ZiTosS
ZiTosS
сообщение 4.5.2009, 22:49; Ответить: ZiTosS
Сообщение #8


Возможно она и есть, но не все боты её понимают
http://google.ru/robots.txt
Вот здесь тоже есть директивы Allow, но использованы они очень редко.
http://help.yandex.ru/webmaster/?id=996567
Яндекс пишет про свой анализатор, ну не как не про все поисковые системы...
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Гость_0_* Гость_0_*
сообщение 3.10.2009, 3:52; Ответить: Гость_0_*
Сообщение #9


А ты уверен, что он тебе нужен? В принципе он сделан для того чтобы поисковики не индексировали какие-либо разделы сайта, типа корзина пользователя в online магазинах; пароли участников сайта. А если тебе особо нечего закрывать от поисковиков то можешь создать пустой текстовый файл robots.txt, то есть разрешение на индексацию всеми поисковыми роботами всего сайта.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Гость_0_* Гость_0_*
сообщение 3.10.2009, 11:08; Ответить: Гость_0_*
Сообщение #10


(Serebrjany mir @ 3.10.2009, 2:52) *
пароли участников сайта

Пароли пользователей хранятся в зашифрованном виде в БД. Если бы пароли хранились на страницах сайтов, то было бы что-то типа:
"Вы не можете использовать этот пароль, потому что его использует пользователь под ником Vasya" :)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 78610 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 7587 28.3.2019, 18:31
автор: regem
Открытая тема (нет новых ответов) Срочно требуется специалист по robots.txt
Разовая работа
1 tankoff 2186 8.3.2017, 1:56
автор: PavelMarty
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Кафе, Ресторан, Банкетные тематики.
0 regem 8335 1.3.2017, 3:20
автор: regem
Открытая тема (нет новых ответов) Работы по файлу robots.txt
8 tankoff 3678 19.3.2016, 20:02
автор: tankoff


 



RSS Текстовая версия Сейчас: 28.3.2024, 13:52
Дизайн