Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....

 

Удаление страницы с Яндекса

Автор voldemar, 04-09-2012, 15:24:05

« назад - далее »

voldemarTopic starter

Добрый день! Подскажите почему не нужная мне страница НЕ вылетает из поиска, ведь около двух месяцев назад Я запретил индексирование страницы в robots. До сих пор страница находится в поиске и Я решил её удалить через сервис Яндекса удаления не нужных страниц: http://webmaster.yandex.ru/delurl.xml

Сайт был перенесен с укоза на дле. В роботсе  Я прописал: Disallow: /load/.
Сегодня просто случайно увидел, что страничка всё равно сидит в поиске Яндекса и решил попробовать удалить её через сервис, но сервис выдал ошибку: Нет оснований для удаления. Сервер не возвращает код 404, индексирование не запрещено ни в robots.txt, ни метатегом noindex.

Понятно, что страница не возвращает код 404, но она запрещена индексации через роботс. Выше Я указал, как выглядит ссылка. Может якобы сервис пишет, что ссылка не прописана в роботсе из-за слэша на конце? Может из-за этого? Если нет, то подскажите, что сделать, чтобы удалить!

Спс за внимание!
Бесплатные фильмы онлайн на TYTFILMOV.NET!
  •  


Alexluxe

Что-то ему не понравилось в robots.txt.
В Вевмастере есть настройка индексирования->robots.txt
Там можно поиграться.
А проверить Аддурилкой Яши. Если запрещено к индексированию, он скажет.


voldemarTopic starter

Пишет: Указанный URL уже проиндексирован.

Вот сам роботс сайта:

User-agent: *
Disallow: /tags/
Disallow: /xfsearch/
Disallow: /page/
Disallow: /*print/
Disallow: /user/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /cat/
Disallow: /load/
Disallow: /publ/
Disallow: /catalog/
Disallow: /favorites/
Disallow: /newposts/
Disallow: /rules.html
Disallow: /pravoobladatelyam.html
Disallow: /dle-rules-page.html
Disallow: /index.php?do=register
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=pm
Sitemap: ввв сайт
Host: ввв сайт

Выделил, которые якобы запрещена роботсом, но в индексе...
Бесплатные фильмы онлайн на TYTFILMOV.NET!
  •  

Alexluxe

На первый взгляд, всё честно.
Разве, что Host: должен быть сразу после Disallow:

Нужно искать, почему Яша не берет!
Насчет завершающего слеша. Я не разбирался с Вашими УРЛами.  Если /load/vasya.html - слеш не помеха. Уберите - узнаете. Добавьте еще дерективу, без слеша.

Нужно мучать, пока Яша не схавает. Одна ошибка, и он отбрасывает весь robots.

Vasiliy111

#4
я конечно не спец но мне кажется чтобы яша убрал из поиска закрытую в robots.txt страницу, должно пройти некоторое время (2-3 апа).

а чтобы проверить правильно ли закрыта страница в  robots.txt  делайте как говорил Alexluxe
ЦитироватьА проверить Аддурилкой Яши. Если запрещено к индексированию, он скажет.
  •  


web11

можно попробывать запретить индексацию с помощью мета-тега robots
META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"

но тогда нужно из robots.txt убрать запрет индексации этой страницы
статьи и шаблоны для  virtuemart
  •  

Efremof

Подскажите плиз..
Закрыл в robots страницу сайта которая является названием каталога и имеет много внутренних ссылок и не уникальный текст  http://advokatdona.ru/uslugi.html  Закрыл я ее так Disallow: /uslugi.html

Но в этом каталоге 30 страниц которые я не закрывал, например http://advokatdona.ru/uslugi/ugolovn.html

Индексация Яндекса не проходит по этим страницам. Я что-то не так сделал?
  •  



Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....