Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....

 

Сайт запрещен к индексации, не пойму где именно

Автор нельчулечка, 06-03-2013, 09:41:34

« назад - далее »

нельчулечкаTopic starter

ДОбрый день! Проблема вот какая. Я 14 февраля сделала файл robot txt по правилам.Вот мой файл User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /tag/
Disallow: /page/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Host: krutobussines.ru
Sitemap: http://krutobussines.ru/sitemap.xml


User-agent: Yandex
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /tag/
Disallow: /page/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=

После этого установила ЧПУ.Все сделала как надо. Но после этого заметила, что яша не индексирует новые посты и робот кроме главной страницы никуда не ходит. Сайт http://krutobussines.ru, получается запрещены к индексации все рубрики, которые находятся слева!
Зашла в вебмастер и там оказалось вот что все мои рубрики
содержит мета-тег meta name="robots" со значением content="noindex" или content="none". Если вы намеренно запретили доступ к этим страницам, то исправлять ничего не требуется.

Если вы самостоятельно не размещали мета-тег и считаете, что эти страницы должны индексироваться, то рекомендуем вам обратиться к разработчикам вашего сайта или к хостеру.

Дату наличия запрещающего мета-тега в дoкументе вы можете видеть напротив каждой исключенной страницы в графе «Последнее посещение». Если с момента последнего обращения робота страницы стали доступными, то они автоматически будут проиндексированы по мере обхода сайта, после чего появятся в поиске с обновлениями поисковых баз. То есть это было 14.02.

Добавлено: 06-03-2013, 09:43:02


Подскажите, где и в чем находится это запрещение, чтобы я убрала. Я смотрела исходный код страницы, но там этого тега не нашла
  •  


alexk-is

Возможно, что такой тэг был раньше, а сейчас его нет.


нельчулечкаTopic starter

не знаю, робот постоянно заходит, но дальше главной не идет(
  •  

webuser

Посмотрите в настройках приватности где стоит кнопочка:
Разрешить поисковым системам индексировать сайт или  Попросить поисковые системы не индексировать сайт.
(Примечание: Эти настройки не блокируют доступ к вашему сайту. Будут ли они учитываться — зависит от поисковых систем.)

нельчулечкаTopic starter

кнопку проверила, все норм, не запрещено(((Что же делать то?
  •  


webuser

Цитата: нельчулечка от 06-03-2013, 09:41:34Дату наличия запрещающего мета-тега в дoкументе вы можете видеть напротив каждой исключенной страницы в графе «Последнее посещение». Если с момента последнего обращения робота страницы стали доступными, то они автоматически будут проиндексированы по мере обхода сайта, после чего появятся в поиске с обновлениями поисковых баз. То есть это было 14.02.
У вас до это был зарегистрирован домен но на нём не было сайта? Если так, то это исправиться. В ЯВМастере всё подробно расписывается - какие ошибки, на строне сайта или сервера. Можно войти в саму ошибку и посмотреть что пишет(если есть ошибки). Посмотреть также сайт глазами робота.

нельчулечкаTopic starter

#6
может быть это было от плагина сео пак платинум, который я установила тоже приблизительно в это время,там галочки автоматически стояли  " noindex к югу от страницы" и "использование noindex для автора архивов", там галочка была, я ее убрала". Может в этом дело?

Добавлено: 06-03-2013, 11:03:36


на этом домене только мой сайт, больше не было))
Вот, что по ошибкам написано
error urls
РЎРѕСЃС,РѕСЏРЅРёРµ РЅР°:  6.03.2013 12:03
URL;Найдено РїРѕ внешней ссылке;Найдено РїРѕ РІРЅСѓС,ренней ссылке;Последнее изменение;Последнее посещение
/category/finansovoe-planirovanie/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/finansovoe-planirovanie/page/2/;РЅРµС,;РЅРµС,;24.02.2013;24.02.2013
/category/finansovyj-gid/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/kak-dobitsya-uspexa/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/kuda-vlozhit-dengi/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/kuda-vlozhit-dengi/page/4/;РЅРµС,;РЅРµС,;24.02.2013;24.02.2013
/category/lichnyj-finansovyj-plan/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/novye-biznes-idei/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/rynok-forex/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/vlozheniya-v-valyutu/;РЅРµС,;РґР°;15.02.2013;15.02.2013
/category/vlozheniya-v-zoloto/;РЅРµС,;РґР°;14.02.2013;14.02.2013
/category/vse-o-fondovom-rynke/;РЅРµС,;РґР°;14.02.2013;14.02.2013
  •  

webuser

Цитата: нельчулечка от 06-03-2013, 10:58:49может быть это было от плагина сео пак платинум, который я установила тоже приблизительно в это время,там галочки автоматически стояли  " noindex к югу от страницы" и "использование noindex для автора архивов", там галочка была, я ее убрала". Может в этом дело?
скорее всего да, если за 3-4 недели с момента как убрали галочки ничего не измениться - начинайте переживать.


нельчулечкаTopic starter

  •  



Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....