Настройка файла robots

Автор Назар-ч, 15-08-2018, 15:09:39

« назад - далее »

Назар-чTopic starter

Здравствуйте.

Вот мой файли роботс 

User-agent: *
 Disallow: /admin
Disallow: /cache
Disallow: /niks
Disallow: /catalog
Disallow: /download
Disallow: /export
Disallow: /system
Disallow: *?*
Disallow: *=*
Disallow: *&*

Sitemap: https://five-s.com.ua/sitemap.xml



У меня вопрос правильно ли он настроен потому что гугл мне присылает письма, что он не может проиндексировать страницы.

Подскажите не закрыл ли я от индексации страницы товаров на сайте?
  •  


alexburn

Ну так в веб-мастере и проверьте. Скопируйте ссылку на товар и проверьте ее в веб-мастере


Назар-чTopic starter

Вы имеете ввиду инструменты для веб-мастеров от гугл?
  •  

alexburn

Цитата: Назар-ч от 15-08-2018, 15:57:55Вы имеете ввиду инструменты для веб-мастеров от гугл?
Совершенно верно. Инструмент может показать, закрыта ли ссылка от роботов

Назар-чTopic starter

спасибо вам за ответы, если можно скажите в каком меню я могу проверить закрыта ли ссылка от ботов.
  •  


vold57

#5
Цитата: Назар-ч от 15-08-2018, 15:09:39гугл мне присылает письма, что он не может проиндексировать страницы
Какие страницы?

Цитата: Назар-ч от 15-08-2018, 19:44:53если можно скажите в каком меню я могу проверить закрыта ли ссылка от ботов.
В Search Console это несложно найти.

И не мешало бы указать, что у вас магазин на опенкарте. Те, у кого вы спрашиваете не обязаны сами это выяснить.
Кроме того, для опенкарта есть типовые варианты robots.txt Их в сети найти не сложно и вы должны были это сделать сами.

Добавлено: 16-08-2018, 00:13:15


Закрыты от индексации карточки товаров. Адреса имеют вид - https://five-s.com.ua/index.php?route=product/product&product_id=2437.
Закрыты правилами:
Disallow: *?*
Disallow: *=*
Disallow: *&*

По хорошему адреса карточек товаров нужно сделать ЧПУ. То есть они должны иметь вид
не
https://five-s.com.ua/index.php?route=product/product&product_id=2437
а
https://five-s.com.ua/nazvanie-kategorii/fartuk-barista-s-nagrudnikom-chernyj

Некоторые подкатегории тоже имеют такие адреса - https://five-s.com.ua/index.php?route=product/category&path=33_232.

Добавлено: 16-08-2018, 00:15:15


У меня на продвижении ИМ на опенкарте и там тоже были такие УРЛы. Я писал ТЗ программисту и все это без проблем было исправлено.