Запрет на индексацию utm и др. в robots.txt

Автор Тема: Запрет на индексацию utm и др. в robots.txt  (Прочитано 1853 раз)

Оффлайн EstrАвтор темы

  • Бизнес оценка: (0)
  • Дебютант
  • *
  • СПАСИБО: 0
  • Сообщений: 6
  • Карма: 0
    • Просмотр профиля

Оффлайн EstrАвтор темы

  • Дебютант
  • *
Здравствуйте всем

Помогите с запретом на индексацию страниц с параметрами ниже в файле robots.txt
пример
основной домен/land.php?changecity=spb&yagla=21444291
основной домен/land.php?changecity=dist&yagla=21644183
/index.php?0&cntnt01&cntnt01articleid=21&cntnt01returnid=15&detail&mact=News



Оффлайн hopea114y

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 2
  • Сообщений: 44
  • Карма: 1
  • Пол: Мужской
  • http://hopea114y.cf/
  • Награды SEO-специалист
    • Просмотр профиля
    • hopea114y

Оффлайн hopea114y

  • Рекрут
  • *
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 2
    • Сообщений: 44
    • Карма: 1
    • Пол: Мужской
    • http://hopea114y.cf/
    • Награды SEO-специалист
      • Просмотр профиля
      • hopea114y
Disallow: land.php?changecity*

Оффлайн EstrАвтор темы

  • Бизнес оценка: (0)
  • Дебютант
  • *
  • СПАСИБО: 0
  • Сообщений: 6
  • Карма: 0
    • Просмотр профиля

Оффлайн EstrАвтор темы

  • Дебютант
  • *
Попробуем через /land.php?changecity*

Остаётся вопрос с яглой.

Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 5039
  • Сообщений: 6902
  • Карма: 277
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Просмотр профиля
    • SEO, интернет-маркетинг, сайостроение

Оффлайн vold57

  • Мастер
  • *****
Остаётся вопрос с яглой.
Вы привели три адреса. Вам подсказали, как запретить индексацию двух адресов. Так что остается вопрос не с yagla, а с третьим адресом. 


Оффлайн hopea114y

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 2
  • Сообщений: 44
  • Карма: 1
  • Пол: Мужской
  • http://hopea114y.cf/
  • Награды SEO-специалист
    • Просмотр профиля
    • hopea114y

Оффлайн hopea114y

  • Рекрут
  • *
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 2
    • Сообщений: 44
    • Карма: 1
    • Пол: Мужской
    • http://hopea114y.cf/
    • Награды SEO-специалист
      • Просмотр профиля
      • hopea114y
Так что остается вопрос не с yagla, а с третьим адресом.
Согласен, какой третий урл?
Проверяйте в Яндекс Вебмастере - Инструменты/Анализ robots.txt на корректность запрета. Что касается &yagla, то приведенный мною вариант должен запрещать все урлы начинающиеся с land.php?changecity и дальше не имеет значения что там еще будет после этого урла.
Но вы проверьте, я точно не уверен.
А вообще вот мануал от Яндекса по роботс - https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html - Обязателен к изучению


Оффлайн alexakap

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 110
  • Сообщений: 351
  • Карма: 15
  • Пол: Мужской
    • Просмотр профиля

Оффлайн alexakap

  • Старожил
  • ****
Можно по такому же принципу запретить все страницы содержащие "cntnt"
Disallow: *cntnt*

Можно запретить все страницы содержащие index.php с любой последовательностю символов, но разрешить страницу index.php

Disallow: index.php*
Allow: index.php$

Проверяем потом доступность страницы /index.php

Но так роботс не составляется. Надо выгружать все страницы сайта и по ним составлять его

Оффлайн EstrАвтор темы

  • Бизнес оценка: (0)
  • Дебютант
  • *
  • СПАСИБО: 0
  • Сообщений: 6
  • Карма: 0
    • Просмотр профиля

Оффлайн EstrАвтор темы

  • Дебютант
  • *
Согласен, какой третий урл?
Проверяйте в Яндекс Вебмастере - Инструменты/Анализ robots.txt на корректность запрета. Что касается &yagla, то приведенный мною вариант должен запрещать все урлы начинающиеся с land.php?changecity и дальше не имеет значения что там еще будет после этого урла.
Но вы проверьте, я точно не уверен.
А вообще вот мануал от Яндекса по роботс - https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html - Обязателен к изучению

Третий из указанных. Ещё есть ссылки с яглой. Но принцип в целом понятен. Попробуем закрыть и проверить работоспособность. Спасибо)


 

Похожие темы