Как открыть для индексации Google файлы

Автор Тема: Как открыть для индексации Google файлы  (Прочитано 3004 раз)

Оффлайн natmirАвтор темы

  • Бизнес оценка: (1, 100%)
  • Старожил
  • ****
  • СПАСИБО: 174
  • Сообщений: 291
  • Карма: 31
  • Пол: Женский
  • Наталья
    • Просмотр профиля
    • Сад и огород

Оффлайн natmirАвтор темы

  • Старожил
  • ****
Здравствуйте. Получила вот такое предупреждение от Google "Мы обнаружили на Вашем сайте проблему, которая может помешать его сканированию. Робот Googlebot не может обработать код JavaScript и/или файлы CSS из-за ограничений в файле robots.txt. Эти данные нужны, чтобы оценить работу сайта. Поэтому если доступ к ресурсам будет заблoкирован, то это может ухудшить позиции Вашего сайта в Поиске."
Сейчас в моем файле robots.txt для робота Googlebot написано следующее:
User-agent: Googlebot
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: */trackback
Disallow: */feed
Disallow: /*?
Disallow: /*?*
Disallow: /tag

Вопрос такой - какие файлы надо разрешить сканировать, как это правильно написать в файле robots.txt?


Оффлайн Positron

  • Бизнес оценка: (0)
  • Дебютант
  • *
  • СПАСИБО: 1
  • Сообщений: 1
  • Карма: 0
    • Просмотр профиля

Оффлайн Positron

  • Дебютант
  • *
Уберите строки

Disallow: /wp-content/plugins
Disallow: /wp-content/themes

там скорее всего лежат css и js, которые хочет Гугл.

Оффлайн Skyward

  • Бизнес оценка: (0)
  • Постоялец
  • ***
  • СПАСИБО: 70
  • Сообщений: 140
  • Карма: 13
  • Пол: Мужской
  • Награды SEO-специалист
    • Просмотр профиля

Оффлайн Skyward

  • Постоялец
  • ***
Все файлы JS и CSS находятся в папках wp-includes и wp-content. Я разрешил доступ в эти папки. Кстати в вебмастере гугла можно будет проверить как видит сайт гугл, а также получить сведения к каким файлам требуется доступ. Так что вам соответственно нужно убрать из robots.txt следующее:

Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes

Оффлайн borzoid

  • Бизнес оценка: (2, 100%)
  • Мастер
  • *****
  • СПАСИБО: 2404
  • Сообщений: 5238
  • Карма: 142
  • Пол: Мужской
  • Награды Более одной тысячи спасибо КМС поисковой оптимизации Мастер по наращиванию ТИЦ
    • Просмотр профиля
    • sbup

Оффлайн borzoid

  • Мастер
  • *****
natmir, Это частая ошибка! От гугла нет смысла закрывать роботом, так только хуже будет. Ненужные страницы убираются либо 301, либо 404, а остальное мета-ноуиндекс. Так лучше всего. Подробнее можно посмотреть на блогах Александра Борисова, блог pro-wordpress.ru и др...

Оффлайн arsenkin

  • Модератор
  • Бизнес оценка: (0)
  • *****
  • СПАСИБО: 123
  • Сообщений: 187
  • Карма: 18
  • Пол: Мужской
  • SEO-специалист
  • Награды SEO-специалист SEO-специалист продвинутого уровня
    • Просмотр профиля
    • arsenkin.ru

Оффлайн arsenkin

  • Модератор
  • *****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 123
    • Сообщений: 187
    • Карма: 18
    • Пол: Мужской
    • SEO-специалист
    • Награды SEO-специалист SEO-специалист продвинутого уровня
      • Просмотр профиля
      • arsenkin.ru
Рекомендуется добавить в файл robots.txt

Allow: /wp-content/themes/*.css
Allow: /wp-content/plugins/*.css
Allow: /wp-content/uploads/*.css

Allow: /wp-content/themes/*.js
Allow: /wp-content/plugins/*.js
Allow: /wp-content/uploads/*.js

Allow: /wp-includes/css/
Allow: /wp-includes/js/
Allow: /wp-includes/images/
✔ ⇛ ⇛ Заказать платный аудит сайта от 10000 руб. https://arsenkin.ru/
✔ ⇛ ⇛ ⇛ Парсинг подсветок и сбор тематичных слов https://arsenkin.ru/tools/sp/


 

Похожие темы

  Тема / Автор Ответов Последний ответ
12 Ответов
3380 Просмотров
Последний ответ 17-06-2012, 14:27:46
от rz00007
2 Ответов
2179 Просмотров
Последний ответ 29-06-2012, 12:28:38
от artis72
0 Ответов
1109 Просмотров
Последний ответ 10-11-2012, 16:31:50
от gnh73
3 Ответов
1151 Просмотров
Последний ответ 10-02-2014, 18:19:13
от webuser
2 Ответов
1677 Просмотров
Последний ответ 08-09-2014, 22:11:40
от NickoF84