[X] Помощник

[kanareka Topic Starter]

Привет! У новичков часто возникает вопрос, почему не индексируется сайт поисковиками? Я решил поучаствовать в конкурсе и заодно рассказать о случаях, когда ваш сайт не хочет индексировать Яндекс или Google (другие поисковые системы зачастую не интересуют вебмастеров и оптимизаторов). Каждый пункт - это один случай с вариантами решения проблемы .

1) Вы опубликовали сайт совсем недавно, поэтому поисковые системы (в частности поисковые роботы-пауки) просто не знают о вашем ресурсе. Может пройти до 1 месяца (бывают случаи и дольшей индексации) прежде, чем ваш проект начнется нормально индексироваться поисковиками.

Чтобы ускорить этот процесс можно:

• добавить сайт в аддурилку Яндекса и Google;
• добавить сайт в панель вебмастера Яндекса и Google. В этом случае ресурс автоматически попадает в очередь на индексирование.
• купить/поставить/приобрести ссылки с твиттера.

2) Ошибки или запрет в robots.txt. Бывают случаи, когда сайт закрывают от индексации, чтобы закончить разработку, а потом забывают снять запрет. Например, если вы видите такую строчку в robots.txt, то ее нужно удалить:

User-agent: *
Disallow: /

Также бывают ситуации, когда вебмастер специально или случайно в robots.txt для директивы host указывает другой сайт. В таком случае ваш проект становится для яндекса неглавным зеркалом.

3) Запрет на индексацию может быть не только в файле robots.txt, но и в мета-теге robots на страницах ресурса. Если в коде ваше проекта есть такая строчка

<meta name="ROBOTS" content="NOINDEX,NOFOLLOW">

то знайте, что она запрещает индексировать страницу.
Например, при установке и в процессе эксплуатации wordpress при постановке галки возле чекбокса "Запретить индексировать сайт" такая строчка добавляется на каждую страницу сайта. Если вы ее ставили когда-то, то не забудьте снять .

4) Домен с историей. Бывает так, что вы купили или зарегистрировали домен, но он оказывается не новый, а на нем уже был какой-то сайт. Проверить это можно, посетив веб-архив интернета. Если ваш сайт не индексируется 1-2 месяца, а вы предприняли все возможные методы по ускорению индексации, то есть большой процент вероятности, что на домен наложены санкции за старый ресурс. В таком случае, нужно написать об этом в службу поддержки Яндекса (а еще лучше через форму в Яндекс.Вебмастере). Также можно отправить заявку через Google Webmaster на пересмотр вашего проекта. Объясните, что вы зарегистрировали новый домен. На нем раньше находился другой сайт. Спросите о возможных санкциях из-за старого ресурса. Попросите возобновить индексацию.

5) Сайт сделан с использованием технологии flash и/или сложных java-скриптов (например, ajax). Подобные "вещи" существенно затрудняют процесс индексации (часто просто не позволяют) .Если это так, а вы хотите получать посетителей с поисковых систем, то нужно переделывать ресурс или создавать дополнительную облегченную версию.

6) Бан или АГС. Если вы получили бан от Яндекса или Google или АГС, то ваше количество проиндексированных страниц ПС сможет упасть до нуля. Это может произойти из-за черных методов оптимизации, продажи ссылок, плохого качества ресурса и так далее. Если это произошло, то нужно бороться с причинами наложения санкций. Как правило, это трудная и кропотливая работу, которая сможет также включить переписку со службами поддержки поисковиков.

7) Недоступность хостинга. Если хостинг или сайт был не доступен долгое время, то поисковые системы могут посчитать ваш ресурс за "мертвый" и выкинуть его из своей базы. Если такое случилось, то возобновляйте работу хостинга. Если со временем ничего не изменится, то есть смысл написать в службу поддержки поисковиков.

8) Вирусы. Тоже самое, что и в 7-м пункте только вместо долговременной недоступности сайта - долговременное присутствие вирусов. Нужно избавляться от вирусов (а желательно вообще их не заводить )

9) Спам, плохое качество контента, запрещенные методы оптимизации - это вещи также могут стать причиной неиндексации вашего проекта. Если такое есть, то нужно это устранять.

10) Ограниченный доступ к странице. Например, если доступ к странице можно получить только при вводе логина или пароля, то поисковики не смогут его индексировать. В таком случае нужно убирать ограничение на просмотр страницы.

11) Ошибки алгоритмов поисковых систем. Да-да, алгоритмы ПС также могут ошибиться и выкинуть ваш сайт из индекса. В этом случае часто помогает время (со временем индексация возвращается). Если она не вернулась, то стоит написать в службу поддержки поисковых систем по вышеуказанным ссылкам.

Про какие ситуации я забыл упомянуть? Буду рад поддержать беседу в теме . Желаю всем вебмастерам и оптимизаторам быстрой и полной индексации!

При поддержке: Fozzy - эксклюзивный спонсор конкурса на Masterwebs. На хостинге Fozzy ваш сайт будет работать до 3-х раз быстрее, а отзывчивая поддержка поможет в любой трудной ситуации. Попробуйте быстрый хостинг Fozzy бесплатно в течение 7 дней!
[img]http://www.masterwebs.ru/sp/fozzy-konkurs.gif[/img]

[enton]

хороший и содержательный пост, не знаю насколько это, но часть людей элементарно забывают проплатить домен, и сайт отваливается из индекса.

[guz]

сайт плохого качества - неуникальный контент+дефолтный шаблон

[Jean]

[member=kanareka], Замечательно, не поленились описать часто встречающиеся проблемы. Только вот часто писали проблему, но не пути её решения или хотяб как выявить...

8) Вирусы. Тоже самое, что и в 7-м пункте только вместо долговременной недоступности сайта - долговременное присутствие вирусов. Нужно избавляться от вирусов (а желательно вообще их не заводить )
9) Спам, плохое качество контента, запрещенные методы оптимизации - это вещи также могут стать причиной неиндексации вашего проекта. Если такое есть, то нужно это устранять.

То есть понятно что такое бывает, но ни всем ясно как найти их у себя и исправить...

[kanareka Topic Starter]

[member=Jean], в одной теме сложно будет подробно описать каждый пункт, потому что много нюансов и индивидуальностей ))

[Макс_mw]

У Вас информация-то уникальная на сайте?

[sosnovskij]

[member=Макс], вы о чем?

[witosp]

Возможно это для вас тоже будет интересно - Яндекс плохо индексирует неизвестные ему слова

Jean: Ссылку удалил. Хотелось бы чтоб вы не советовали статьи с сомнительной и не подтвержденной информацией. Вы вводите в заблуждение, как и автор статьи не понимает что пишет.

Сообщение отредактировал Jean - 21.6.2013, 9:01

Причина редактирования: сомнительная информация

[narolskay_mw]

У меня был домен с историей, над сайтом год работала, в итоге в гугл - 100страниц, в Яндексе -1, кстати письма Платону не помогли.

[Jean]

[member=narolskay], АГС, да сейчас он самый частый гость) А вы достучались до Платона? Или с автоответчиком общались? Там Платон ни сразу пишет и менеджеры ни сразу отвечают, сначала вы говорите с автоответчиком и вам шлют стандартные письма.

Сайт в архиве и вы сделали сайт одной тематики?

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.