Как правильно запретить индексацию страниц пагинации в robots.txt?

Автор Oleg495, 21-05-2016, 07:43:39

« назад - далее »

Efremof

Цитата: Efremof от 11-06-2016, 14:56:33
Спасибо. А вообще этот инструмент Яндекса работает сейчас? Проверяю и все что закрыто в robots показывает как открытые страницы!

Добавлено: 11-06-2016, 15:23:22


не получается

Получилось!
Disallow: *?c=*
  •  




Efremof

Но это будет работать только для Яндекса? А Google так и проиндексирует 900 ненужных страниц? Или Googlу тоже дружит с Robots.txt ?
  •  


seoDima2015

#14
Если только пагинацию  такого типа то:
Disallow: /?page=*
или
Disallow: /?page=
Одно и тоже

Добавлено: 15-06-2016, 15:03:03


Для гугла robots также работает. В выдаче иногда бывают страницы сайтов со сниппетом типа "заблoкировано в файле robots.txt"
+ в вебмастере Google есть инструмент для проверки robots.