[X] Помощник

[ShowPrint Topic Starter]

Как говорят буржуи - "проблем из": не выкидываются из Г-соплей несуществующие страницы... Как бороться - уже не знаю...

Конкретика: страницы старой древней версии сайта, которые переделаны уж года три как... Вернее нельзя сказать что страницы не удаляются - они удаляются, но "восстают из мертвых" аки зомби...  :angry:
Уже устал махать мечом как самурай  :ph34r: , и силы на исходе...

На примере "одной из" зомби-страниц:

Что может означать волшебная фраза "срок действия истек"???  :blink:

Уж года полтора как с означенной страницы стоит 301 на действующую страницу, и не просто стоит, а работает:


В какой-то момент (почти год назад) "ознакомился с условиями удаления" в ГВМ, после чего подумалось что может Гугль ж сует сопли по той причине что страницы не закрыты от индексации и засунул-таки запрет в robots.txt. По анализу того же ГВМ этот запрет работает:


Что делать и как бороться с данной ситуацией - просто ума не приложу... Может есть у кого умные мысли/советы?
Как всегда буду признателен любым идеям...

[ShowPrint Topic Starter]

Актуально, только что очередные две сопли вытер...  :angry:

[BLIK]

ShowPrint, Что то как то ты странно закрыл в robots без слеша, это как?

По сути строка должна начинаться так

Disallow: / 

Не?

[ixman]

Элементарно вбил в Google поиск страницы, от которых нужно избавиться и нашёл ссылку на другом сайте. В этом и проблема скорее всего

[ShowPrint Topic Starter]

закрыл в robots без слеша, это как?

BLIK_mw, а вот так!!!  :D  Уметь надо!!!...  :lol: Работает же (скрин)!!!...  B)

Если серьёзно - спасибо, поправлю, но думаю не в этом дело... К сожалению...  :(

Это я для примера взял, также в сопли влетают и *.pdf (к примеру), которые закрыты со слешем... :wacko:

Собирался уж убрать редиректы и проверить отдачу со старых страниц 404, но больно уж вес жалко... Как-никак домену больше 10 лет и его худо-бедно набралось... :(

Привет Ixman, как причина - вполне вероятно, однако вопрос в другом - "чё делать-то с этим"...  :blink:

[ixman]

ShowPrint, привет. Вот как Google дятлу объяснить, я просто умываю руки, 301 должен был бы всё исправить, но нет, что-то не так. Ещё обратил внимание на двойной редирект, с www на без www, а потом уже на нужную страницу.

[BLIK]

ShowPrint,Попробуй все эти хвосты редиректить на 404, сами вылетят. 

[ShowPrint Topic Starter]

Ixman, сам думал, что "должен был", даже уверен был в этом... поэтому смиренно вытирал сопли день ото дня... но уж больше чем полгода... рука устала...

обратил внимание на двойной редирект

у меня?  :o
У меня основное заявлено "с www"... Ну да, два правила прописаны, по очереди:

# Склейка зеркал, основное с WWW
RewriteCond %{HTTP_HOST} !^www.
RewriteRule (.*) http://www.%{HTTP_HOST}/$1 [R=301,L]
...
# Редирект на галерею
RewriteCond %{QUERY_STRING} ^id=508.*$ [NC]
RewriteRule (.*) primeri-pechati-na-totalkah.php? [L,R=301]

Я опять в чем-то тупанул???

хвосты редиректить на 404, сами вылетят

BLIK_mw, а в 2-3 строки, чтоб ламмеру было понятно, слабо? ;) (можно когда время будет, хотелось бы понять принцип "как", технику/тактику накурю...)
и если я буду отдавать 404 с этих хвостов, то разве это не равносильно тому что я просто уберу 301 на нынешние соответствующие страницы? вес в этом случае все равно похе пропадет?...


Сообщение отредактировал ShowPrint - 11.9.2015, 22:00

[BLIK]

разве это не равносильно тому что я просто уберу 301 на нынешние соответствующие страницы?

Я только предложил такой вариант, а как будет в итоге я сказать точно не могу.

Но у меня не разу в соплях не было 404 страницы, отсюда я и предположил что если попробовать отдавать 404, то Google должен успокоится так как страницы нет( ну и в robots закрыть все)

Про вес сказать ничего не могу.

P.s Осталось написать редирект в  htaccess с регуляркой, если в url есть "это", отдаем 404.

Сообщение отредактировал BLIK - 11.9.2015, 22:24

[ShowPrint Topic Starter]

если в url есть "это", отдаем 404

А еще если бы при отдаче 404 на самом деле поисходил 301 и 404 не препятствовало сохранению веса... Это из области фантастики... :D :D :D (истерический смех от бессилия)

Боюсь это не решение проблемы, поскольку ладно, предположим таким образом я смогу победить старые страницы, но у меня есть еще текущие(рабочие) файлы-ссылки на сайте (doc, pdf, txt, eps и др.), которые закрыты от индексации и в robots.txt (правильно, со слешем) и в htaccess, но все равно лезут в сопли к "дятлу"... При том, что ЯВМ абсолютно чётко их вычислил и поместив в "исключено роботом" по причине запрета индексации...

Карма это моя, что-ли каждое утро начинать с утирания соплей ГВМ... :wacko: