Seo Форум

Поисковая оптимизация => Продвижение сайта => Индексация сайта => Тема начата: alluseful от 25-08-2015, 08:58:43

Название: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: alluseful от 25-08-2015, 08:58:43
Здравствуйте.
прошу высказать ваше мнение по такому вопросу.
Имеет ли смысл прописывать robots.txt директиву(отдельную строчку) под каждый поисковик?
У меня как то стандартно, открыто для всех , но на днях натолкнулся на семинар в котором рекомендуют под основные поисковики отдельные строчки дополнительно вводить
(https://www.sbup.com/seo-forum/proxy.php?request=http%3A%2F%2Fjoxi.ru%2FVrwWeVBtebE8rX&hash=a58464edcb557b6bdad6e20865aa673035aeb288)

http://joxi.ru/VrwWeVBtebE8rX
Название: Re: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: ВикторияИ от 25-08-2015, 10:00:02
 У Вас есть трафик с других поисковиков?

вообще, насколько я знаю, в роботсе важны запреты а не разрешения, за исключением указания файлов сайтмэп...
Название: Re: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: alluseful от 25-08-2015, 10:20:30
Цитата: ВикторияИ от 25-08-2015, 10:00:02
У Вас есть трафик с других поисковиков?

вообще, насколько я знаю, в роботсе важны запреты а не разрешения, за исключением указания файлов сайтмэп...
трафик то есть с разных поисковиков и я то с вами согласен в том что если нет запрета - все поисковики могут заходить, но в том то и суть вопроса что увидел семинар в котором ведущие говорили о дополнительных строчках под каждый поисковик. Вроде как - лучше будет. Каждому поисковику персональное приглашение ;D
Название: Re: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: Marishel от 25-08-2015, 10:25:47
если сдл, то поисковик итак придет без приглашения и будет приходить постоянно
а если гс, то ему хоть vip приглашение - он будет редко заглядывать
Название: Re: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: ВикторияИ от 25-08-2015, 10:43:25
Цитата: alluseful от 25-08-2015, 10:20:30семинар в котором ведущие говорили о дополнительных строчках под каждый поисковик

чем они это мотивировали?
может узнаем что-нибудь новенькое )     
Название: Re: прописывать ли в robots.txt каждый поисковик отдельно?
Отправлено: Yama от 25-08-2015, 11:01:47
для Байду надо написать на китайском - чтоб полояльнее был, а для Спутника на русском
  Сюда не лезь!: wp-admin
  Сюда тоже не лезь!: wp-login