Настройка файла robots

Автор Тема: Настройка файла robots  (Прочитано 1080 раз)

Оффлайн Назар-чАвтор темы

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 39
  • Карма: 0
    • Просмотр профиля

Оффлайн Назар-чАвтор темы

  • Рекрут
  • *
Настройка файла robots
« : 15-08-2018, 15:09:39 »
Здравствуйте.

Вот мой файли роботс 

User-agent: *
 Disallow: /admin
Disallow: /cache
Disallow: /niks
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: *?*
Disallow: *=*
Disallow: *&*

Sitemap: https://five-s.com.ua/sitemap.xml



У меня вопрос правильно ли он настроен потому что гугл мне присылает письма, что он не может проиндексировать страницы.

Подскажите не закрыл ли я от индексации страницы товаров на сайте?


Оффлайн alexburn

  • Бизнес оценка: (1, 100%)
  • КМС
  • *****
  • СПАСИБО: 1056
  • Сообщений: 3375
  • Карма: 72
  • Пол: Мужской
  • Нужна прога для компа?
    • Просмотр профиля
    • Прикладные программы на заказ

Оффлайн alexburn

  • КМС
  • *****
  • Доп. информация
    • Бизнес оценка: (1, 100%)
    • СПАСИБО: 1056
    • Сообщений: 3375
    • Карма: 72
    • Пол: Мужской
    • Нужна прога для компа?
      • Просмотр профиля
      • Прикладные программы на заказ
Re: Настройка файла robots
« Ответ #1 : 15-08-2018, 15:44:01 »
Ну так в веб-мастере и проверьте. Скопируйте ссылку на товар и проверьте ее в веб-мастере

Оффлайн Назар-чАвтор темы

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 39
  • Карма: 0
    • Просмотр профиля

Оффлайн Назар-чАвтор темы

  • Рекрут
  • *
Re: Настройка файла robots
« Ответ #2 : 15-08-2018, 15:57:55 »
Вы имеете ввиду инструменты для веб-мастеров от гугл?

Оффлайн alexburn

  • Бизнес оценка: (1, 100%)
  • КМС
  • *****
  • СПАСИБО: 1056
  • Сообщений: 3375
  • Карма: 72
  • Пол: Мужской
  • Нужна прога для компа?
    • Просмотр профиля
    • Прикладные программы на заказ

Оффлайн alexburn

  • КМС
  • *****
  • Доп. информация
    • Бизнес оценка: (1, 100%)
    • СПАСИБО: 1056
    • Сообщений: 3375
    • Карма: 72
    • Пол: Мужской
    • Нужна прога для компа?
      • Просмотр профиля
      • Прикладные программы на заказ
Re: Настройка файла robots
« Ответ #3 : 15-08-2018, 16:16:47 »
Вы имеете ввиду инструменты для веб-мастеров от гугл?
Совершенно верно. Инструмент может показать, закрыта ли ссылка от роботов

Оффлайн Назар-чАвтор темы

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 39
  • Карма: 0
    • Просмотр профиля

Оффлайн Назар-чАвтор темы

  • Рекрут
  • *
Re: Настройка файла robots
« Ответ #4 : 15-08-2018, 19:44:53 »
спасибо вам за ответы, если можно скажите в каком меню я могу проверить закрыта ли ссылка от ботов.


Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 4946
  • Сообщений: 6743
  • Карма: 273
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Просмотр профиля
    • SEO, интернет-маркетинг, сайостроение

Оффлайн vold57

  • Мастер
  • *****
Re: Настройка файла robots
« Ответ #5 : 15-08-2018, 23:54:45 »
гугл мне присылает письма, что он не может проиндексировать страницы
Какие страницы?

если можно скажите в каком меню я могу проверить закрыта ли ссылка от ботов.
В Search Console это несложно найти.

И не мешало бы указать, что у вас магазин на опенкарте. Те, у кого вы спрашиваете не обязаны сами это выяснить.
Кроме того, для опенкарта есть типовые варианты robots.txt Их в сети найти не сложно и вы должны были это сделать сами.

Добавлено: 16-08-2018, 00:13:15

Закрыты от индексации карточки товаров. Адреса имеют вид - https://five-s.com.ua/index.php?route=product/product&product_id=2437.
Закрыты правилами:
Disallow: *?*
Disallow: *=*
Disallow: *&*

По хорошему адреса карточек товаров нужно сделать ЧПУ. То есть они должны иметь вид
не
https://five-s.com.ua/index.php?route=product/product&product_id=2437
а
https://five-s.com.ua/nazvanie-kategorii/fartuk-barista-s-nagrudnikom-chernyj

Некоторые подкатегории тоже имеют такие адреса - https://five-s.com.ua/index.php?route=product/category&path=33_232.

Добавлено: 16-08-2018, 00:15:15

У меня на продвижении ИМ на опенкарте и там тоже были такие УРЛы. Я писал ТЗ программисту и все это без проблем было исправлено.
« Последнее редактирование: 16-08-2018, 00:15:15 от vold57 »


 

Похожие темы

  Тема / Автор Ответов Последний ответ
7 Ответов
2252 Просмотров
Последний ответ 06-02-2012, 12:27:18
от Roman Shvets
17 Ответов
1989 Просмотров
Последний ответ 25-11-2015, 14:49:45
от alexburn
4 Ответов
1177 Просмотров
Последний ответ 04-12-2015, 00:13:59
от Вадим Костин
6 Ответов
1302 Просмотров
Последний ответ 28-01-2016, 16:57:24
от jansen
0 Ответов
1732 Просмотров
Последний ответ 21-10-2016, 17:16:04
от Владимир75