робот

Автор Тема: робот  (Прочитано 1789 раз)

Оффлайн Sm!leАвтор темы

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 0
  • Сообщений: 50
  • Карма: 2
    • Просмотр профиля

Оффлайн Sm!leАвтор темы

  • Пользователь
  • **
робот
« : 16-05-2010, 11:43:50 »
Кто знает, что ОБЯЗАТЕЛЬНО должно присутствовать в robot.txt для успешного продвижения ресурса?


Оффлайн Бобер

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 31
  • Карма: 1
    • Просмотр профиля

Оффлайн Бобер

  • Рекрут
  • *
Re: робот
« Ответ #1 : 16-05-2010, 12:09:44 »
Не должно быть ограничений на индексирование нужных вам страничек и вроде все.
Иногда еще закрывают бесхозные страницы с неуником,или страницы где текстов мало.

Онлайн Sevab

  • Администратор
  • Бизнес оценка: (6, 100%)
  • *****
  • СПАСИБО: 9887
  • Сообщений: 14503
  • Карма: 664
  • Пол: Мужской
    • Просмотр профиля
    • Trust Directory Project

Онлайн Sevab

  • Администратор
  • *****
Re: робот
« Ответ #2 : 17-05-2010, 09:07:56 »
Согласен.
Посмотрите роботс этого сайта.
Закрыто все что можно назвать дублем, остальное не запрещено.

Оффлайн мастер_SDM

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 43
  • Карма: 2
  • Пол: Мужской
    • Просмотр профиля

Оффлайн мастер_SDM

  • Рекрут
  • *
Re: робот
« Ответ #3 : 28-05-2010, 19:34:06 »
Не должно быть ограничений на индексирование нужных вам страничек и вроде все.
Иногда еще закрывают бесхозные страницы с неуником,или страницы где текстов мало.

По "неуникам" согласен, по дублям тоже согласен, а вот для чего закрывать от индексирования страницы с уникальным текстом, но в малом объеме? Чем вам помешает страница с законченной темой, но малым количеством текста? Или на самом деле пока запланированная страница не доделана и не заполнена, то лучше ее скрыть, а вот открыть к индексации только после заполнения?!?

Оффлайн Chiliec

  • Владимир
  • Бизнес оценка: (3, 100%)
  • КМС
  • *****
  • СПАСИБО: 553
  • Сообщений: 2290
  • Карма: 188
  • Пол: Мужской
  • Веб-маэстро
  • Награды Мастер поисковой оптимизации Почетный гражданин нашего форума
    • Просмотр профиля
    • Обо мне

Оффлайн Chiliec

  • КМС
  • *****
  • Доп. информация
    • Владимир
    • Бизнес оценка: (3, 100%)
    • СПАСИБО: 553
    • Сообщений: 2290
    • Карма: 188
    • Пол: Мужской
    • Веб-маэстро
    • Награды Мастер поисковой оптимизации Почетный гражданин нашего форума
      • Просмотр профиля
      • Обо мне
Re: робот
« Ответ #4 : 28-05-2010, 19:47:53 »
Или на самом деле пока запланированная страница не доделана и не заполнена, то лучше ее скрыть, а вот открыть к индексации только после заполнения?!?
Нет, недоделанную страницу незачем закрывать, лишь бы она была уникальной. Приведу пример:
Вы владелец варезника и точно знаете что у вас через месяц появится новая версия какой-либо программы. Вы можете сделать страничку под эту программу, написать какая она классная и что она скоро здесь будет и начать накачивать её внешними ссылками. К моменту появления программы страничка уже будет в топе и вы первыми будете снимать с неё сливки 8)
Как-то так :D

Так же в robots.txt обязательно указывайте основное зеркало яндексу:
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.и чтобы не создавать излишнюю нагрузку на сервер можно увеличить время между загрузкой страниц:
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.


Оффлайн upss

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 2
  • Сообщений: 22
  • Карма: 1
  • Пол: Мужской
    • Просмотр профиля
    • ЧП Добра тара

Оффлайн upss

  • Рекрут
  • *
Re: робот
« Ответ #5 : 13-02-2011, 23:47:42 »
благодарю форумчан за советы. Подскажите, а время задержки, чтобы не грузить сервер когда оправданно, - вернее какая должна быть посещаемость сайта, чтобы эти настройки были оправданы?


 

Похожие темы

  Тема / Автор Ответов Последний ответ
1 Ответов
1067 Просмотров
Последний ответ 06-12-2012, 12:25:03
от SPopov
8 Ответов
2101 Просмотров
Последний ответ 14-11-2013, 06:30:48
от Smyga
3 Ответов
1136 Просмотров
Последний ответ 27-02-2014, 16:21:49
от Paradoxs_
0 Ответов
631 Просмотров
Последний ответ 11-11-2015, 15:52:09
от Clever
5 Ответов
1238 Просмотров
Последний ответ 18-03-2016, 15:16:41
от Elfa