Как запретить индексацию некоторых страниц в роботсе?

[makar5994]

Как запретить индексацию некоторых страниц в роботе? Яндекс проиндексировал много моих страниц со слешем в конце
   
/italyanskaya-kuhnya/rizotto     
/italyanskaya-kuhnya/rizotto/
/pervie-blyuda/rassolnik-s-pochkami
/pervie-blyuda/rassolnik-s-pochkami/
От чего так получилось и что с такими страницами делать. Как запретить одну из страниц от индекса и почему идентичные страницы попали в индекс? Сайт bestreceptov.ru под а.г.с и я пытаюсь найти возможные причины. Посоветуйте пожалуйста что делать.

[SeoBrabus]

От чего так получилось

это издержки бесплатных движков, что делать? для начала определитесь какой вид страниц вас устраивает со / или без него. Лично я предпочел первый вариант второму и прописав директиву в htaccess избавился от дублей.

я пытаюсь найти возможные причины

уберите метрику и исходящие ссылки все. Проверьте купленные ссылки, возможно тоже надо снять.

[makar5994]

Лично я предпочел первый вариант второму и прописав директиву в htaccess избавился от дублей.

Чем 1 вариант лучше второго и какую директиву в htaccess нужно прописывать?

[SeoBrabus]

первый вариант мне больше нравится, поэтому я предпочел именно его
вот подробности

[kstnews]

уберите метрику

Почему, если не трудно, поподробнее.

вот подробности

СПС

[SeoBrabus]

Почему, если не трудно, поподробнее.

метрика дает яндексу полный доступ к состоянию сайта а оно не очень, поэтому нет смысла ее показывать.

[msutki]

Для запрета индексации некоторых страниц в роботе можно использовать файл robots.txt. Вам нужно добавить следующую строку в ваш файл robots.txt:

User-agent: *
Disallow: /italyanskaya-kuhnya/rizotto/
Disallow: /pervie-blyuda/rassolnik-s-pochkami/

Это запретит индексацию страниц со слешем в конце. Обратите внимание, что наличие или отсутствие слеша в URL может влиять на индексацию двумя разными страницами.

Чтобы объяснить, почему идентичные страницы попали в индекс, могут быть несколько причин. Например, поисковые роботы могут обрабатывать страницы по-разному, основываясь на содержимом и внутренних ссылках сайта. Также возможно наличие внешних ссылок на обе версии страницы.

Если у вас есть подозрения, что ваш сайт был скомпрометирован или имеются другие проблемы с индексацией, рекомендую проконсультироваться с экспертом в области SEO или веб-разработки. Они смогут анализировать ваш сайт более подробно и предоставить рекомендации по оптимизации.

[Superb-Thai]

Disallow прописать для этих страниц в Robots