Перейти к содержимому



Проверьте ошибки в моем robot.txt

#1 Valdemar
Valdemar
  • Неактивные
  • 13 сообщений
  • Репутация: -1
0

Обновлено 04 мая 2012 - 21:05  Отправлено 01 мая 2012 - 22:33

Согласно всех советов, сделал robot.txt для сайта сделанного на DLE 9.0 а он лежит внизу топа
Обратите внимая на текс, вроде все по уму, для двух систем составленно, а им все равно не нравится


User-agent: *
Disallow: /*print
Disallow: /*userinfo
Disallow: /2009/*
Disallow: /2010/*
Disallow: /index.php?subaction=userinfo
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /language/*
Disallow: /templates/*
Disallow: /upgrade/*
Disallow: /backup/*
Disallow: /engine/*
Disallow: /tags/*
Disallow: /user/*
Disallow: /favorites/*
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /rules.html
Sitemap: http://porno-siski.ru/sitemap.xml
User-agent: Yandex
Disallow: /*print
Disallow: /*userinfo
Disallow: /2009/*
Disallow: /2010/*
Disallow: /2011/*
Disallow: /index.php?subaction=userinfo
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /language/*
Disallow: /templates/*
Disallow: /upgrade/*
Disallow: /backup/*
Disallow: /engine/*
Disallow: /user/*
Disallow: /tags/*
Disallow: /favorites/*
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Disallow: /rules.html
Host: porno-siski.ru
Sitemap: http://porno-siski.ru/sitemap.xml

 

 

  • 0

#2 razzor
razzor
  • Пользователь
  • 514 сообщений
  • Репутация: 58

Отправлено 02 мая 2012 - 07:04

название файла должно быть robots.txt а не robot
  • 0

:)  Лучшие смартфоны из Китая!  :smile-thumb-up:



#3 Valdemar
Valdemar
    Topic Starter
  • Неактивные
  • 13 сообщений
  • Репутация: -1

Отправлено 02 мая 2012 - 21:37

название файла должно быть robots.txt а не robot


да не, эта я писал название и опечатку сделал, ты скажи лучше по содержанию, что не так?
  • 0

#4 Taxis
Taxis
  • Неактивные
  • 129 сообщений
  • Репутация: 16

Отправлено 03 мая 2012 - 08:20

Обратите внимая на текс, вроде все по уму, для двух систем составленно, а им все равно не нравится

А что конкретно им не нравится? Может дело не в robots.txt? :(
  • 0

#5 razzor
razzor
  • Пользователь
  • 514 сообщений
  • Репутация: 58

Отправлено 03 мая 2012 - 11:50

вот для примера

Настройка Robots.txt для Dle

User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments
Disallow: /statistics.html
Host: Ваш_сайт
Sitemap: http://Ваш_сайт/sitemap.xml

В результате:
Из индекса убираются все версии страниц для печати;
Закрываются страницы профилей, при помощи которых часто спамят недобросовестные вебмастеры;
Запрещаются к индексации страницы, на которых отсутствует полезный для посетителей контент, например, админка;
Отбрасываем всякий хлам;
Задаём местонахождение карты сайта и хост.

источник

да, что конкретно не нравится?
  • 0

:)  Лучшие смартфоны из Китая!  :smile-thumb-up:



#6 Valdemar
Valdemar
    Topic Starter
  • Неактивные
  • 13 сообщений
  • Репутация: -1

Отправлено 03 мая 2012 - 14:33

ДА ПРИМЕР НЕ ПЛОХОЙ, НО РАЗВЕ СЕЙЧАС НЕ ЛУЧШЕ ПРОПИСЫВАТЬ ЭТОТ КОД ДВАЖДЫ, ОДИН ЛИЧНО ДЛЯ ЯНДЕКСА, А ДРУГОЙ ДЛЯ ОСТАЛЬНЫХ ПОИСКОВЫХ СИСТЕМ?

КОНКРЕТНО, ЭТО ТО ЧТО ЯНДЕКС НЕ ЦЕПЛЯЕТ СТРАНИЦЫ, ОШИБОК ТО ОН НЕ ПИШЕТ.
нУ СЛЕДУЯ ЛОГИКЕ, ЕСЛИ, КОНТЕНТ УНИКАЛЬНЫЙ, ОФОРМЛЕННО ВСЕ ПРАВИЛЬНО, С SEO ТО ПО УМУ, ДОЛЖЕН ЯНДЕКС ХАПАНУТЬ ЕГО В ПОИСК.
нУ ЕСЛИ ТАКОВОГО НЕ ПРОИСХОДИТ, ЗНАЧИТ НАДО ИСКАТЬ ОШИБКУ, ПО МОИМ ПРЕДПОЛОЖЕНИЯМ ДЕЛО НАВЕРНО В РОБОТЕ.ТХТ
  • -1

#7 Sosnovskij
Sosnovskij
  • Пользователь PRO
  • 5 442 сообщений
  • Репутация: 829

Отправлено 03 мая 2012 - 22:32

Параметр Sitemap можно указать один раз.

Valdemar, пишите без капслока. В принципе разделять для Яндекса и остальных поисковых систем не обязательно.
  • 0
:excl: Требуется линкбилдер: браузер + Excel. Сдельная оплата + бонусы. Блог — https://sosnovskij.ru/. Добавить меня в Telegram, Twitter, Facebook.


#8 enton
enton
  • Пользователь
  • 140 сообщений
  • Репутация: 16

Отправлено 04 мая 2012 - 08:01

если это новый сайт, то прикупите нормальных ссылочек немного. для dle нормальный роботс, если вебмастер яндекса не видит ошибок, значит есть два выхода либо подождать пару апов, либо писать платонам.

лично на моей памяти был лишь один раз когда сайт не индексировался по вине яндекса, платоны решили проблему и через 2-3 апа сайт почти полностью проиндексировался.
  • 0

#9 Valdemar
Valdemar
    Topic Starter
  • Неактивные
  • 13 сообщений
  • Репутация: -1

Отправлено 04 мая 2012 - 21:05

гуд, в принцепи с сылками я уже начал работать, а ящу буду ждать, спасибо за советы
  • 0

robot
robot
  • Пользователь PRO
  • 2 652 сообщений
  • Репутация: 85


Похожие темы
  Название темы Автор Статистика Последнее сообщение

Пользователь месяца
Vmir Vmir 1-й за Март
Очков активности: 1 080 4 темы, 60 сообщений, 10 баллов репутации
ТОП самых активных за этот месяц
  • Фотография MattCutts
    #1

    MattCutts (dmitrylee.com)
    Очков активности: 18 1 тема, 9 сообщений, 1 балл репутации

  • Фотография WGN
    #2

    WGN (worldgamenews.com)
    Очков активности: 15 1 тема, 7 сообщений, 1 балл репутации

  • Фотография Linomen
    #3

    Linomen
    Очков активности: 12 0 тем, 8 сообщений, 1 балл репутации

  • Фотография NataliaAntalia
    #4

    NataliaAntalia (zdorovemedicina.ru)
    Очков активности: 9 0 тем, 6 сообщений, 1 балл репутации

  • Фотография Albina92
    #5

    Albina92
    Очков активности: 9 1 тема, 3 сообщения, 1 балл репутации

  • Фотография PLERDY
    #6

    PLERDY
    Очков активности: 9 1 тема, 3 сообщения, 1 балл репутации

  • Фотография TindrumGM
    #7

    TindrumGM (novosti-land.ru)
    Очков активности: 7.5 1 тема, 2 сообщения, 1 балл репутации

  • Фотография Vmir
    #8

    Vmir
    Очков активности: 6 Вне конкурса за определение пользователя месяца

  • Фотография Ульяна
    #9

    Ульяна
    Очков активности: 6 1 тема, 1 сообщение, 1 балл репутации

  • Фотография BLIK
    #10

    BLIK
    Очков активности: 6 Вне конкурса за определение пользователя месяца

  • Показать весь ТОП 10

Поддержите форум! =)
Топ 5 участников по репутации

Оформление форума – IPBSkins.ru