Первая тысяча страниц с ошибками, кто видит почему???

[Choice]

В вебмастере гугл  написано:"Первая тысяча страниц с ошибками. "Может у кого есть мнение почему?
На всякий случай даю файл robots.txt 
сайт dressesw.com сделан на двух движках WP и OpenCart
Opencart - в папке /shop/
WP - в корневой директории.


Файл robots.txt

Код Выделить Развернуть

User-Agent: *
Disallow: /shop/index.php?route=account
Disallow: /shop/index.php?route=checkout
Disallow: /shop/index.php?route=common
Disallow: /shop/index.php?route=product
Disallow: /shop/index.php?route=information/information&information_id=
Disallow: /shop/*?manufacturer
Disallow: /shop/*?sort
Disallow: /shop/*?order
Disallow: /shop/*?keyword
Disallow: /shop/admin/
Disallow: /shop/download/
Disallow: /shop/catalog/
Disallow: /shop/system/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Sitemap: http://dressesw.com/shop/sitemap.xml
Sitemap: http://dressesw.com/sitemap.xml


User-agent: Yandex
Disallow: /shop/index.php?route=account
Disallow: /shop/index.php?route=checkout
Disallow: /shop/index.php?route=common
Disallow: /shop/index.php?route=product
Disallow: /shop/index.php?route=information/information&information_id=
Disallow: /shop/*?manufacturer
Disallow: /shop/*?sort
Disallow: /shop/*?order
Disallow: /shop/*?keyword
Disallow: /admin/
Disallow: /download/
Disallow: /catalog/
Disallow: /system/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Sitemap: http://dressesw.com/shop/sitemap.xml
Sitemap: http://dressesw.com/sitemap.xml
Host: dressesw.com


[msd777]

У меня был такой косяк с Гуглом совсем недавно.
Случайно заметил 12 числа, что новая страница сайта вылетела из индекса.
Влез в вебмастер, оказалось что 10 числа бот Google не мог получить доступа к сайту.
Ошибка DNS.
Регистратор сваливает вину на хостинг, а техподдержка на регистратора.
Но сейчас ошибки нет.
Я думаю хостинг мой был виноват, т.к. до этого они уже банили бота от Яндекс.
Но сейчас все у меня нормально.

Правда в вебмастере до сих пор висит:
Общее количество ошибок DNS - 100%
Ошибки URL - Первая тысяча страниц с ошибками - эта хрень тоже вылезла. Может она связана с ошибками DNS?

Но вы проверьте в вебмастере, может ли гуглбот получить доступ к сайту:
Сервис Состояние - Просмотреть как Googlebot
Загрузите главную страницу. Если все пройдет успешно, то все ок.

[Choice]

Спасибо что отреагировали. В вебмастере

Доступ к файлу robots.txt - в Роботу Googlebot не удалось получить доступ к файлу robots.txt, и скaнирование было отложено, чтобы исключить возможность доступа к заблoкированным страницам.

Подключение к серверу - Роботу Googlebot не удалось получить доступ к URL, поскольку истекло время ожидания ответа на запрос или доступ к сайту для робота Googlebot заблoкирован.

DNS - Не удалось установить соединение с DNS-сервером.

Вот такие там дела и не могу понять кто виноват в этом.

Добавлено: 13-11-2012, 17:10:51

Но вы проверьте в вебмастере, может ли гуглбот получить доступ к сайту:
Сервис Состояние - Просмотреть как Googlebot

тут он сказал - успешно.

[msd777]

Состояние - Просмотреть как Googlebot

Если успешно и googlebot получил содержимое страницы, то доступ к сайту нормализовался.

Так вы можете отправить в индекс страницы, если какие-то вылетели из индекса из-за того, что Гоша не имел доступа к сайту.

Скорее всего был сбой у регистратора, где вы купили домен. Или хостинг ваш глюканул, возможно временно по ошибке был забанен бот Гугла.

Кстати, у меня напротив DNS стоит вопрос красный (ошибка). А напротив "доступ к файлу robots.txt" зеленая галочка (типа нет ошибки).

[shurik74]

Скорее всего был сбой у регистратора, где вы купили домен

Навряд ли, была такая же проблема с DNS, после чего сайт тупо вылетел за сотню. При этом у хоста и регистратора показывало всё в порядке и техподдержка тоже отвечала что у них всё в порядке.
Это скорее всего какой то глюк на гугле, переборщили со своими фильтрами 

[Choice]

Будем надеесться что это так. 

[MrBear]

У меня таже проблема с тысячей страниц с ошибками, плюс упал PR c 3 до 0