X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

Открыть тему
Тема закрыта
> Вопрос по robots.txt
Леший_mw
Леший_mw
Topic Starter сообщение 4.9.2012, 21:49; Ответить: Леший_mw
Сообщение #1


В файле прописываю:

User-agent: Press
Disallow: fit
Согласно стандартам эта директива запрещает индексировать файл press и каталог fit. Но что-то не так, что-то не работает.
Может, лучше для верности использовать слэш "/", может, робот не может отличить файл от каталога...
Вообще, почему может не работать?
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Jean
Jean
сообщение 4.9.2012, 22:05; Ответить: Jean
Сообщение #2


[member=Леший], Может почитать мануал? http://robotstxt.org.ru/robotsexclusion/spec советую))
Да вы верно поняли корень своей ошибки)
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
sosnovskij
sosnovskij
сообщение 5.9.2012, 11:11; Ответить: sosnovskij
Сообщение #3


В user agent нужно указывать для кого даются условия, а не какие файлы нужны скрыть от индексации :)

Замечание модератора:
Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней.
Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой
или обратитесь к любому из модераторов.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Вопрос - платное размещение баннеров на сайте
10 WGN 3126 14.12.2020, 14:20
автор: Peterson
Открытая тема (нет новых ответов) Вопрос по рекламе в "инстаграме"
Только активные аккаунты могут создавать или редактировать рекламу
8 Zubkov 16021 17.1.2020, 17:49
автор: Forumacc
Горячая тема (нет новых ответов) Тема имеет прикрепленные файлыВопрос-ответ о работе форума
307 dos1k 43057 9.11.2019, 17:59
автор: heks
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 78629 12.8.2019, 21:28
автор: neonix
Открытая тема (нет новых ответов) Куплю места для размещения TXT+URL Строительная тематика.
7 regem 7596 28.3.2019, 18:31
автор: regem


 



RSS Текстовая версия Сейчас: 29.3.2024, 19:42
Дизайн