Помощник
|
Какой роботс.тхт оставить? |
Constantine174
|
Сообщение
#1
|
||
|
|
||
|
|||
Artos_mw |
3.4.2019, 22:08;
Ответить: Artos_mw
Сообщение
#2
|
|
Это
Host: https://****** Sitemap: https://*******/sitemap_index.xml не понятно что такое. Правильность роботса можно проверить у Яндекса https://webmaster.yandex.ru/tools/robotstxt/ |
|
|
Constantine174
|
Сообщение
#3
|
|
Это Host: https://****** Sitemap: https://*******/sitemap_index.xml За звездочками типа что бы ссылки на сайт не палить. Хотя его и так уже пол форума знает. Яндекс ни чего плохого не сказал. Я в плане того спрашивал, что правильно ли там все эти Disallow и Allow? А точнее правильно ли все в них открыто и закрыто? Сообщение отредактировал Constantine - 3.4.2019, 22:30 -------------------- |
|
|
Андрей_WPM |
3.4.2019, 22:36;
Ответить: Андрей_WPM
Сообщение
#4
|
|
Constantine, гугл робот сканирует сайт в таком виде, в котором сайт показывается в гугл хроме 41 версии. Во втором варианте js и css закрыты, а роботу они нужны чтобы понять как сайт ведет себя. Если будут закрыты, консоль вебмастера будет ругаться на это. В яндексе пока не анонсировали это в открытую, но подозреваю, что js он уже тоже может запускать и учитывать его в сторону адаптивности. О том, что гугл бот = хрому 41 версии, можно найти официальное заявление от гугловцев в интернете. Идеальный роботс для гугла:
[mwhide=0]https://wpmaster.kz/robots.txt[/mwhide] Сообщение отредактировал Андрей WPMasterKZ - 3.4.2019, 22:37 -------------------- |
|
|
Constantine174
|
Сообщение
#5
|
|
Идеальный роботс для гугла Для Яндекса он то же идеален или там все так плохо? -------------------- |
|
|
Андрей_WPM |
4.4.2019, 10:11;
Ответить: Андрей_WPM
Сообщение
#6
|
|
Constantine, для Яндекса тоже идеальный. Сейчас лишние страницы лучше закрывать тегами ноуиндекс, чем через роботс.
-------------------- |
|
|
Rodiola |
7.7.2019, 23:32;
Ответить: Rodiola
Сообщение
#7
|
|
Андрей WPMasterKZ, а что означает Disallow: /files? Если сделать роботс, как у Вас, все должно стать "гуд"? :) Вот так вот коротко и ясно? Больше ничего не нужно делать? Получается, что если я закрыла плагином метки (рубрики уже были закрыты), то это прописывать отдельно в роботсе не надо?
|
|
|
Андрей_WPM |
8.7.2019, 10:33;
Ответить: Андрей_WPM
Сообщение
#8
|
|
Rodiola, files - это моя личная папка в которой файлы для одной статьи лежат. Они не нужны просто в индексе и на них больше никто не ссылается точно, поэтому эта папка закрыта в роботсе.
Если сделать такой роботс как у меня без предварительной подготовки, у вас в индексе появиться куча дублей и всякого мусора :-) . Перед этим нужно закрыть тегом ноуиндекс не нужные страницы, а уже потом файл роботс чистить. Чувствую, нужно статью по этому поводу писать. Через пару дней анонсирую, если не к спеху, потерпите маленько, я постараюсь максимально расписать как его лучше составить под конкретный сайт. Просто в двух словах не объяснить. По поводу меток и рубрик вы верно думаете. -------------------- |
|
|
Rodiola |
8.7.2019, 11:18;
Ответить: Rodiola
Сообщение
#9
|
|
|
Андрей WPMasterKZ,
Через пару дней анонсирую, если не к спеху, потерпите маленько, я постараюсь максимально расписать как его лучше составить под конкретный сайт. Просто в двух словах не объяснить. Ок, спасибо. Подождем. А то я уже запуталась с этим роботсом. Все пишут по-разному....
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Кто где хранит файлы? И какой объем? просто интересно |
19 | mark2013 | 2007 | 25.3.2024, 6:42 автор: Skyworker |
|
Какой % отказов нормален для сайта? | 10 | Aloof | 2554 | 24.3.2024, 21:45 автор: Liudmila |
|
Через какой браузер и как можно найти в кэшэ браузера видео | 10 | Room | 1947 | 23.3.2024, 7:41 автор: Room |
|
Исчезающие фрилансеры после предоплаты. Зачем? Какой смысл? | 35 | metvekot | 9273 | 19.3.2024, 20:19 автор: MisterBit |
|
Какой сайт пробовать создавать под небольшое ГЕО? | 6 | kapusta1 | 1242 | 15.3.2024, 13:06 автор: OS_ZP_UA |
Текстовая версия | Сейчас: 29.3.2024, 18:06 |