Помогите!

[_XyJIuGaN_]

В общем после сегодняшнего апа, вылетели все странички новостей (DLE), остались только категории и главная, на АГС не похоже.
Недели назад редактировал robots.txt, думаю проблема в этом..
Может что не так.. подскажите..

Код Выделить Развернуть

User-agent: *
Disallow: /*print
Disallow: /*userinfo
Disallow: /2011/
Disallow: /index.php?subaction=userinfo
Disallow: /backupurl.php
Disallow: /admin.php
Disallow: /language/
Disallow: /templates/
Disallow: /tags/
Disallow: /newposts/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Sitemap: http://chity-game.ru/sitemap.xml

User-agent: Yandex
Disallow: /*print
Disallow: /*userinfo
Disallow: /2011/
Disallow: /index.php?subaction=userinfo
Disallow: /backupurl.php
Disallow: /admin.php
Disallow: /language/
Disallow: /templates/
Disallow: /tags/
Disallow: /newposts/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /engine/
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=rules
Host: http://chity-game.ru/
Sitemap: http://chity-game.rusitemap.xml
User-agent: MediaPartners-Google
Allow: /
User-agent: YandexDirect
Allow: /

Странички которые остались:

Как видите, остались только категории. Трафик не изменился, удивительно, но только в +...

[nemetc]

когда то приходило письмо, типа у вас не правильный роботс, ругалось на директиву не правильно Host: http://chity-game.ru/, правильно Host: chity-game.ru

[_XyJIuGaN_]

nemetc, спасибо, изменил.
Также снес все ноиндексы в полных новостях.

[master#1]

в host'e естественно указывается имя домена, а не урл с хттп

[_XyJIuGaN_]

в host'e естественно указывается имя домена, а не урл с хттп

Так как выше написал nemetc?
Host: chity-game.ru ?

[Morfiy]

Host: chity-game.ru

Верно

[ewdokimow]

_XyJIuGaN_, а проверяли в вебмастере закрыты ссылки или нет? Обычно вебмастер показывает ссылки, если они запрещены к индексации роботом.

[_XyJIuGaN_]

_XyJIuGaN_, а проверяли в вебмастере закрыты ссылки или нет? Обычно вебмастер показывает ссылки, если они запрещены к индексации роботом.

да там еще старые, стандартные  настройки роботс, хотя изменял больше недели назад.
Неужели АГС подхватил? Контент та уникальный...

[ewdokimow]

_XyJIuGaN_, в Яндекс роботс загружается моментом и можете проверять.
Одного уникального контента мало.

[Ametist]

Некорректно составленные строчки 'Host:' игнорируются.  Но не вызывают тотальную ошибку всего robots.txt  Читаем

Предполагаемые причины:
Страницы могли вылететь из-за дублей, а именно стоило закрыть
Dissalow: /page/

Верните Disallow: /tags/
Можно закрыть страницу статистики

Вторая причина, робот на всех страницах прочел одно и тоже начало: "Скачать" и т.д. бесплатно. Старайтесь видоизменять.
Это может быть принято за ключевой спам

К тому же сайт у вас открывается  и с www  и без

А, как отметил ewdokimow, robors.txt изменяется в панели  вебмастера Яши так же быстро, как и на сайте.
Перепроверьте страницы к запрету.