роботс.тхт

[Anton63]

Добрый день!
Посмотрите, пожалуйста, файл роботс правильно составлен?

Код Выделить Развернуть

User-agent: *
Disallow: /partners/
Disallow: /partners
Disallow: /admin/
Disallow: /admin

Host: sferi63.ru
Sitemap: http://sferi63.ru/sitemap.xml
Пытался закрыть от индексации всеми поискавиками страницу http://sferi63.ru/partners и такие страницы как http://sferi63.ru/partners/1 , http://sferi63.ru/partners/4 , http://sferi63.ru/partners/2 и пр. То же самое и с admin

[chebj]

*/partners/*
Так правильней и короче роботс

[hellomoto]

После составления проверяй ссылки через яндекс.вебмастер/ анализ robots не ошибешься)

[Anton63]

После составления проверяй ссылки через яндекс.вебмастер/ анализ robots не ошибешься)

Ага, как раз вчера на этот сервис натолкнулся. Спасибо!

[akkauntmako]

Disallow: /partners/
и Disallow: /admin/ - лишние строки
Disallow: /partners - закрывает все страницы начинающиеся с /partners, в том числе и /partners/1 и т.д. аналогично Disallow: /admin

[Anton63]

Disallow: /partners/
и Disallow: /admin/ - лишние строки
Disallow: /partners - закрывает все страницы начинающиеся с /partners, в том числе и /partners/1 и т.д. аналогично Disallow: /admin

Яндекс говорит об обратном - этих строк не достаточно.