Перейти к содержимому



Robots

#11 ZiTosS

ZiTosS
  • Пользователь
  • 5 148 сообщений
  • Репутация: 8
0

Отправлено 25 Июль 2010 - 02:12

pechenki, не повлияет, это просто будет означать, что вы роботам разрешаете к индексации все ссылки (конечно не учитываем noindex и rel="nofollow")
  • 0

#12 Matt

Matt
  • Пользователь
  • 774 сообщений
  • Репутация: 2

Отправлено 25 Июль 2010 - 19:54

Многие бесплатные CMS сами создают роботс.
  • 0

#13 dymer

dymer
  • Пользователь
  • 8 сообщений
  • Репутация: 0

Отправлено 29 Сентябрь 2010 - 23:32

А файл роботс может стоять по умолчанию есть сайт с шаблона укоз?
  • 0

#14 Matt

Matt
  • Пользователь
  • 774 сообщений
  • Репутация: 2

Отправлено 29 Сентябрь 2010 - 23:48

На укозе не знаю. Есть на джумле и ДЛЕ, по-моему.
  • 0

#15 ZiTosS

ZiTosS
  • Пользователь
  • 5 148 сообщений
  • Репутация: 8

Отправлено 01 Октябрь 2010 - 21:30

dymer, что значит по умолчанию? Вообще на Ucoz можно использовать robots.txt
  • 0

#16 atog

atog
  • Пользователь
  • 18 сообщений
  • Репутация: 0

Отправлено 10 Октябрь 2010 - 18:18

Вот тут подробно расказано о файле robots.txt
http://robotstxt.org.ru/
Создавать его нужно. Для ответа на ваш вопрос нужно увидеть ваш сайт.
  • 0

#17 tati777

tati777
  • Пользователь
  • 2 сообщений
  • Репутация: 0

Отправлено 14 Октябрь 2010 - 00:03

У меня сайт на "укозе" ссылка на него в подписи. Добавила файл через панель управления сайтом Главная » Файловый менеджер . Файл назвла robots.txt. Он у меня содержит:
User-agent: *
Disallow:
Всё ли верно я сделала. Подскажите пожалуйста. :lol:
  • 0

#18 ZiTosS

ZiTosS
  • Пользователь
  • 5 148 сообщений
  • Репутация: 8

Отправлено 17 Октябрь 2010 - 11:09

tati777,
У вас не
User-agent: *
Disallow:
а
User-agent: *
Disallow: /
Таким образом вы запретили всем роботам индексацию всего сайта.
Правильный первый вариант, а не второй.
  • 0

#19 mylenta

mylenta
  • Пользователь
  • 10 сообщений
  • Репутация: 0

Отправлено 23 Октябрь 2010 - 01:38

У меня сайт на "укозе" ссылка на него в подписи. Добавила файл через панель управления сайтом Главная » Файловый менеджер . Файл назвла robots.txt. Он у меня содержит:

User-agent: *
Disallow:
Всё ли верно я сделала. Подскажите пожалуйста. :lol:

А зачем запрещать? если вам нечего писать то лучше вообще удалить (пустой robots) - тоже самое
  • 0

#20 fanya

fanya
  • Пользователь
  • 3 сообщений
  • Репутация: 0

Отправлено 27 Февраль 2011 - 16:07

Есть проблема с двойными страницами

В индексе появились страницы, как-бы составленные из двух //dekor-remont.narod.ru/shtrolenie.html/foto.html, хотя реально существуют отдельно shtrolenie.html и отдельно foto.html, причём открыть двойные страници можно, они вроде как автоматически генерируются на основе первого файла. Если не сложно, поясните, что не так и как это исправить.

Если запретить доступ через robots.txt прописав
Disallow: /shtrolenie.html/*.html
Как думаете, ускорит это устранение данной проблемы? и правильно ли я понимаю, что запретятся к индексации все двойные файлы, начинающиеся с /shtrolenie.html/, а просто shtrolenie.html будет доступна. Или всё-таки стоит подождать? Но уже две недели вебмастер выводит 43 странице в структуре сайта вместо существующих 25-и и одна двойная висит в индексе. Всё проверил, ошибочных внешних ссылок на двойные страницы нет, а внутренние есть только с этой же двойной странице. Мучает сомнение в правильности писать запрет на страницы, которых на самом деле нет.
  • 0

robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Оформление форума – IPBSkins.ru