Перейти к содержимому

Сервис обмена электронных валют

Партнерская программа Kredov

Помогите побороть Гугль-сопли... (((

#1 ShowPrint

ShowPrint
  • Пользователь PRO
  • 1 701 сообщений
  • Репутация: 405
0

Отправлено 08 Сентябрь 2015 - 22:12

Как говорят буржуи - "проблем из": не выкидываются из Г-соплей несуществующие страницы... Как бороться - уже не знаю...

 

Конкретика: страницы старой древней версии сайта, которые переделаны уж года три как... Вернее нельзя сказать что страницы не удаляются - они удаляются, но "восстают из мертвых" аки зомби...  :angry:

Уже устал махать мечом как самурай  :ph34r: , и силы на исходе...

 

На примере "одной из" зомби-страниц:

PrtScr.png

Что может означать волшебная фраза "срок действия истек"???  :blink:

 

Уж года полтора как с означенной страницы стоит 301 на действующую страницу, и не просто стоит, а работает:

PrtScr+.png

 

В какой-то момент (почти год назад) "ознакомился с условиями удаления" в ГВМ, после чего подумалось что может Гугль ж сует сопли по той причине что страницы не закрыты от индексации и засунул-таки запрет в robots.txt. По анализу того же ГВМ этот запрет работает:

PrtScr++.png

 

Что делать и как бороться с данной ситуацией - просто ума не приложу... Может есть у кого умные мысли/советы?

Как всегда буду признателен любым идеям...


 

 

  • 0
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#2 ShowPrint

ShowPrint
    Topic Starter
  • Пользователь PRO
  • 1 701 сообщений
  • Репутация: 405

Отправлено 11 Сентябрь 2015 - 17:30

Актуально, только что очередные две сопли вытер...  :angry:


  • 0
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#3 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 631

Отправлено 11 Сентябрь 2015 - 19:52

@ShowPrint, Что то как то ты странно закрыл в robots без слеша, это как?

 

По сути строка должна начинаться так

Disallow: / 

Не?


  • 2


#4 Ixman

Ixman
  • Пользователь PRO
  • 2 159 сообщений
  • Репутация: 432

Отправлено 11 Сентябрь 2015 - 20:04

Элементарно вбил в Google поиск страницы, от которых нужно избавиться и нашёл ссылку на другом сайте. В этом и проблема скорее всего

 

 

mKhqloY.png


  • 2

#5 ShowPrint

ShowPrint
    Topic Starter
  • Пользователь PRO
  • 1 701 сообщений
  • Репутация: 405

Отправлено 11 Сентябрь 2015 - 20:14

закрыл в robots без слеша, это как?
@BLIK, а вот так!!!  :D  Уметь надо!!!...  :lol: Работает же (скрин)!!!...  B)

 

Если серьёзно - спасибо, поправлю, но думаю не в этом дело... К сожалению...  :(

 

Это я для примера взял, также в сопли влетают и *.pdf (к примеру), которые закрыты со слешем... :wacko:

 

Собирался уж убрать редиректы и проверить отдачу со старых страниц 404, но больно уж вес жалко... Как-никак домену больше 10 лет и его худо-бедно набралось... :(

 

Привет @Ixman, как причина - вполне вероятно, однако вопрос в другом - "чё делать-то с этим"...  :blink:


  • 1
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#6 Ixman

Ixman
  • Пользователь PRO
  • 2 159 сообщений
  • Репутация: 432

Отправлено 11 Сентябрь 2015 - 20:18

@ShowPrint, привет. Вот как Google дятлу объяснить, я просто умываю руки, 301 должен был бы всё исправить, но нет, что-то не так. Ещё обратил внимание на двойной редирект, с www на без www, а потом уже на нужную страницу.


  • 0

#7 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 631

Отправлено 11 Сентябрь 2015 - 20:19

@ShowPrint,Попробуй все эти хвосты редиректить на 404, сами вылетят. 


  • 0


#8 ShowPrint

ShowPrint
    Topic Starter
  • Пользователь PRO
  • 1 701 сообщений
  • Репутация: 405

Отправлено 11 Сентябрь 2015 - 20:59

@Ixman, сам думал, что "должен был", даже уверен был в этом... поэтому смиренно вытирал сопли день ото дня... но уж больше чем полгода... рука устала...

 

 

обратил внимание на двойной редирект

у меня?  :o

У меня основное заявлено "с www"... Ну да, два правила прописаны, по очереди:

# Склейка зеркал, основное с WWW
RewriteCond %{HTTP_HOST} !^www.
RewriteRule (.*) http://www.%{HTTP_HOST}/$1 [R=301,L]
...
# Редирект на галерею
RewriteCond %{QUERY_STRING} ^id=508.*$ [NC]
RewriteRule (.*) primeri-pechati-na-totalkah.php? [L,R=301]

Я опять в чем-то тупанул???

 

 

 

хвосты редиректить на 404, сами вылетят

@BLIK, а в 2-3 строки, чтоб ламмеру было понятно, слабо? ;) (можно когда время будет, хотелось бы понять принцип "как", технику/тактику накурю...)


и если я буду отдавать 404 с этих хвостов, то разве это не равносильно тому что я просто уберу 301 на нынешние соответствующие страницы? вес в этом случае все равно похе пропадет?...


Сообщение отредактировал ShowPrint: 11 Сентябрь 2015 - 21:00

  • 0
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


#9 BLIK

BLIK
  • Супермодератор
  • 3 173 сообщений
  • Репутация: 631

Отправлено 11 Сентябрь 2015 - 21:24

разве это не равносильно тому что я просто уберу 301 на нынешние соответствующие страницы?

 

Я только предложил такой вариант, а как будет в итоге я сказать точно не могу.

 

Но у меня не разу в соплях не было 404 страницы, отсюда я и предположил что если попробовать отдавать 404, то Google должен успокоится так как страницы нет( ну и в robots закрыть все)

 

Про вес сказать ничего не могу.

 

P.s Осталось написать редирект в  htaccess с регуляркой, если в url есть "это", отдаем 404.


Сообщение отредактировал BLIK: 11 Сентябрь 2015 - 21:24

  • 0


#10 ShowPrint

ShowPrint
    Topic Starter
  • Пользователь PRO
  • 1 701 сообщений
  • Репутация: 405

Отправлено 11 Сентябрь 2015 - 21:45

если в url есть "это", отдаем 404
А еще если бы при отдаче 404 на самом деле поисходил 301 и 404 не препятствовало сохранению веса... Это из области фантастики... :D :D :D (истерический смех от бессилия)

 

Боюсь это не решение проблемы, поскольку ладно, предположим таким образом я смогу победить старые страницы, но у меня есть еще текущие(рабочие) файлы-ссылки на сайте (doc, pdf, txt, eps и др.), которые закрыты от индексации и в robots.txt (правильно, со слешем) и в htaccess, но все равно лезут в сопли к "дятлу"... При том, что ЯВМ абсолютно чётко их вычислил и поместив в "исключено роботом" по причине запрета индексации...

 

Карма это моя, что-ли каждое утро начинать с утирания соплей ГВМ... :wacko:


  • 0
MasterWEBS: третий дом - моё хобби и увлечение... Второй дом: работа - не меньше 12 часов в день...
Первый дом - под охраной: "Осторожно - злая жена!" (дрессировалась долго и надёжно) /*ссылку не просите - не дам!*/


robot

robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Оформление форума – IPBSkins.ru