Не могу найти страницу 404

Efremof · 13-02-2013, 09:30:27

В Яндекс Вебмастете показывается 1 страница - "Страницы запрещены к индексированию вебмастером или не существуют"

Проверяю сайт http://advokatdona.ru например сервисом http://audit.megaindex.ru или http://anybrowser.com/linkchecker.html и везьде пишет что все ОК.

Как можно найти эту битую ссылку? Или что это может быть?

Спасибо

Ivanushkka · 13-02-2013, 09:56:05

Пропишите Robots.txt, а то он у вас практически ничего не разрешает к индексации.

Efremof · 13-02-2013, 16:38:54

Disallow: /index.html ведь не означает что у меня закрыта от индексации главная?

remind4me · 13-02-2013, 17:00:51

Цитата: Efremof от 13-02-2013, 09:30:27Проверяю сайт http://advokatdona.ru например сервисом http://audit.megaindex.ru или http://anybrowser.com/linkchecker.html и везьде пишет что все ОК.
Как можно найти эту битую ссылку? Или что это может быть?

На странице, где вы видите "Страницы запрещены к индексированию вебмастером или не существуют", ниже есть жэе ссылка:
HTTP-статус: Ресурс не найден (404)

Вот кликните по ней и получите список адресов (полные URLы) с ошибкой 404.
Вот по ним и проверяйте.

Там же будут указаны и даты "Последнее изменение" и "Последнее посещение".

Ivanushkka · 13-02-2013, 18:00:56

Цитата: Efremof от 13-02-2013, 16:38:54
Disallow: /index.html ведь не означает что у меня закрыта от индексации главная?

Именно это и означает.

Efremof · 13-02-2013, 18:19:31

Да нет. У меня есть главная страница http://advokatdona.ru/ и есть http://advokatdona.ru/index.html
Вторая закрыта для того чтобы не было дубля. Ну это как с www и без.
Или я не прав?

remind4me · 13-02-2013, 19:04:54

Цитата: Efremof от 13-02-2013, 18:19:31
Да нет. У меня есть главная страница http://advokatdona.ru/ и есть http://advokatdona.ru/index.html
Вторая закрыта для того чтобы не было дубля. Ну это как с www и без.
Или я не прав?

Да, не правы. Никто не закрывает index.html, тем более главной страницы, которая итак должна всегда открываться по умолчанию, потому, что к http://advokatdona.ru/ ваш сервер автоматом подставляет index.html или index.php

Так что уберите из robots.txt "Disallow: /index.html"

webuser · 13-02-2013, 19:40:08

Efremof, index.html не запрещать в роботсе надо, а склеить с главной /

Ivanushkka · 13-02-2013, 21:30:45

Цитата: webuser от 13-02-2013, 19:40:08
Efremof, index.html не запрещать в роботсе надо, а склеить с главной /

Именно!! пропишите правильный robots.txt и дождитесь новой индексации, это сделать не так долго. если вылезут дубли, то поработайте над robots как следует и все.

Efremof · 13-02-2013, 22:58:45

Так вы и не поняли. У меня нормальный robots.txt и Главная там не закрыта. Я по ней продвигаюсь и она проиндексирована. Закрыты страницы на который не уникальный контент.