Вопрос по роботсу тхт

Fish_su · 26-12-2012, 16:24:49

Есть сайт на движке вебасист с кучей дублей. Хочу закрыть ненужные страницы от индексации в роботсе. Дубли имеют следующие адреса:

http://wдаблюw.mysite.ru/category/zhidkie-sredstva-dlja-stirki-/offset10/
http://wдаблюw.mysite.ru/category/zhidkie-sredstva-dlja-stirki-/?sort=name&direction=DESC
http://wдаблюw.mysite.ru/category/zhidkie-sredstva-dlja-stirki-/all/
http://wдаблюw.mysite.ru/category/zhidkie-sredstva-dlja-stirki-/?sort=name&direction=ASC
http://wдаблюw.mysite.ru/category/v-posudo-moechnoj-mashine/all/?sort=customers_rating&direction=DESC
http://wдаблюw.mysite.ru/category/v-posudo-moechnoj-mashine/?sort=customers_rating&direction=ASC

В роботсе это должно выглядеть как-то так:
User-agent: *
Disallow: /offset10
Disallow: /?sort=name&direction=DESC
Disallow: /all
Disallow: /?sort=name&direction=ASC
Disallow: /?sort=customers_rating&direction=DESC
Disallow: /?sort=customers_rating&direction=ASC

Или можно как-то проще сделать?

Добавлено: 26-12-2012, 20:11:16

Что, никто не знает? О_о Как исключить из индексации страницы, адрес которых имеет в конце:
/offset10/
/?sort=name&direction=DESC
/all/
/?sort=name&direction=ASC
/all/?sort=customers_rating&direction=DESC
/?sort=customers_rating&direction=ASC

ignatye · 05-01-2013, 03:15:02

Используйте конструкцию <meta name="robots" content="noindex, nofollow" /> в <head> отдельно взятых страниц. Не придётся перегружать robots.txt

Вопрос по роботсу тхт

Fish_su

ignatye