Почему Robots.txt в панели вебмастера яндекса и на хосте различаются?

Автор Тема: Почему Robots.txt в панели вебмастера яндекса и на хосте различаются?  (Прочитано 4365 раз)

Оффлайн LerunsiaАвтор темы

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 15
  • Сообщений: 87
  • Карма: 1
  • Пол: Женский
    • Скажите, пожалуйста!

Оффлайн LerunsiaАвтор темы

  • Пользователь
  • **
Здравствуйте! У меня возник такой вопрос: почему яндекс.вебмастер показывает не весь файл Robots.txt? У меня файл такой:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /tag/
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
 
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /tag/
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: skazite-pozaluista.ru

Sitemap: http://skazite-pozaluista.ru/sitemap.xml.gz
Sitemap: http://skazite-pozaluista.ru/sitemap.xml

А когдая пытаюсь его проверить в панели вебмастера и нажимаю кнопку "загрузить с сайта", то он выдает лишь:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://skazite-pozaluista.ru/sitemap.xml.gz

Кто-нибудь знает, с чем это связано? Просто у меня что-то совсем практически перестали люди с поисковиков приходить (раньше было хоть 2-6 человек в день, а сейчас по нулям), вот я и пытаюсь понять, почему...
Сайт опросов "Скажите, пожалуйста!" http://skazite-pozaluista.ru/


Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 5454
  • Сообщений: 7642
  • Карма: 298
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Аудит и продвижение сайтов

Оффлайн vold57

  • Мастер
  • *****
Вот такой robots.txt у вас на сайте:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://skazite-pozaluista.ru/sitemap.xml.gz


Откуда вы взяли этот вариант, неизвестно:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /tag/
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
 
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /tag/
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: skazite-pozaluista.ru

Sitemap: http://skazite-pozaluista.ru/sitemap.xml.gz
Sitemap: http://skazite-pozaluista.ru/sitemap.xml



Оффлайн Cyrus

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 271
  • Сообщений: 484
  • Карма: 47
  • Пол: Мужской
  • Награды SEO-специалист

Оффлайн Cyrus

  • Старожил
  • ****
Lerunsia, как уже заметил vold57, на сайте у вас другой robots.txt, нежели вы считаете. Файл robots.txt должен лежать в корневой папке сайта и открываться по адресу - http://skazite-pozaluista.ru/robots.txt. В других местах поисковые роботы его не найдут, особенно если по стандартному адресу уже лежит какой-то другой robots.txt.

Оффлайн LerunsiaАвтор темы

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 15
  • Сообщений: 87
  • Карма: 1
  • Пол: Женский
    • Скажите, пожалуйста!

Оффлайн LerunsiaАвтор темы

  • Пользователь
  • **
Блин, а я то думаю, почему у меня в индексе столько дублей... этот длинный файл у меня находится на хостинге: файловый менеджер - public_html - skazite-pozaluista.ru. И вот там уже и робот и сайтмэп...что же делать? Куда мне нужно положить робота, чтобы его яндекс увидел?
Сайт опросов "Скажите, пожалуйста!" http://skazite-pozaluista.ru/

Оффлайн listik

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 130
  • Сообщений: 340
  • Карма: 13
  • Пол: Мужской
  • Брависсимо, СтилиSSимо!!!
    • маникюр Бибирево

Оффлайн listik

  • Старожил
  • ****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 130
    • Сообщений: 340
    • Карма: 13
    • Пол: Мужской
    • Брависсимо, СтилиSSимо!!!
      • маникюр Бибирево
Куда мне нужно положить робота, чтобы его яндекс увидел?
Туда, где находится файл index.php или index.html обычно это папка (на сервере хостинга ру центр) под названием docs
Я слабо знаком с вордпрессом, но в этой папке будут вложены папка admin(или вариация с таким же началом).
В общем нужно поместить в ту папку, в которой Вы разворачивали Вордпресс
« Последнее редактирование: 20-12-2013, 16:16:23 от listik »


Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 5454
  • Сообщений: 7642
  • Карма: 298
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Аудит и продвижение сайтов

Оффлайн vold57

  • Мастер
  • *****
Lerunsia, вам же ответили уже:
Файл robots.txt должен лежать в корневой папке сайта и открываться по адресу - http://skazite-pozaluista.ru/robots.txt.

Оффлайн listik

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 130
  • Сообщений: 340
  • Карма: 13
  • Пол: Мужской
  • Брависсимо, СтилиSSимо!!!
    • маникюр Бибирево

Оффлайн listik

  • Старожил
  • ****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 130
    • Сообщений: 340
    • Карма: 13
    • Пол: Мужской
    • Брависсимо, СтилиSSимо!!!
      • маникюр Бибирево
Lerunsia, вам же ответили уже:
Барышня спросила где (в какой папке) в Файл-менеджере виртуального хостинга разместить файл

Оффлайн LerunsiaАвтор темы

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 15
  • Сообщений: 87
  • Карма: 1
  • Пол: Женский
    • Скажите, пожалуйста!

Оффлайн LerunsiaАвтор темы

  • Пользователь
  • **
listik, спасибо, буду искать!
vold57, да я вот думала, что тот путь, который я указала, и есть корневая папка и что у меня он в правильном месте лежит...
Вот и файл index.php там же лежит...

Добавлено: 20-12-2013, 17:01:30

вообще, этот файл index.php много где лежит  ???
« Последнее редактирование: 20-12-2013, 17:01:30 от Lerunsia »
Сайт опросов "Скажите, пожалуйста!" http://skazite-pozaluista.ru/


Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 5454
  • Сообщений: 7642
  • Карма: 298
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Аудит и продвижение сайтов

Оффлайн vold57

  • Мастер
  • *****
Lerunsia, единственное что вам нужно было сделать сразу - это проверить, ваш файл грузится с корня или нет. Сейчас, если не знаете куда его заливать именно на вашем хостинге, можно сделать ряд текстовых файлов, залить их в предполагаемо "правильные" папки и проверить какой вариант у вас загружается именно с корня.

В разных файлах разместите разную информацию, например в одном фале цифру 1, во втором - 2 и так далее.


Оффлайн LerunsiaАвтор темы

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 15
  • Сообщений: 87
  • Карма: 1
  • Пол: Женский
    • Скажите, пожалуйста!

Оффлайн LerunsiaАвтор темы

  • Пользователь
  • **

vold57, Спасибо и вам! А дело то решалось просто! У меня просто этот файл был назван как робот, а не роботС! переименовала и все получилось! Правда, успела во многие места уже его поназагружать...как думаете, нужно ли их оттуда удалить или пусть лежат?
Сайт опросов "Скажите, пожалуйста!" http://skazite-pozaluista.ru/


 

Похожие темы

  Тема / Автор Ответов Последний ответ
1 Ответов
1476 Просмотров
Последний ответ 15-01-2012, 15:25:46
от msd777
0 Ответов
785 Просмотров
Последний ответ 25-11-2013, 12:01:22
от Denis.m
6 Ответов
2060 Просмотров
Последний ответ 27-11-2013, 22:19:57
от [DiZ]
0 Ответов
966 Просмотров
Последний ответ 27-05-2014, 07:57:32
от ВикторияИ
3 Ответов
1728 Просмотров
Последний ответ 21-10-2016, 21:18:29
от budavnik