И снова robots.txt

Автор Тема: И снова robots.txt  (Прочитано 2308 раз)

Оффлайн ruslan_fdАвтор темы

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 82
  • Сообщений: 299
  • Карма: 19
  • Пол: Мужской
  • SEOщник
    • Просмотр профиля

Оффлайн ruslan_fdАвтор темы

  • Старожил
  • ****
И снова robots.txt
« : 17-05-2011, 20:43:17 »
Всем привет!
Очень надеюсь на вашу помощь.
Сейчас зашел в гугл вебмастер и обнаружил что "гугл обнаружил некоторые проблемы..."
(нажмите чтобы показать/скрыть)
Захожу в список проблем, и вижу вот что:
(нажмите чтобы показать/скрыть)
Тоесть одна и таже новость индексируется гуглом по двум адресам.
Пожалуйста, подскажите что стоит прописать в robots.txt или еще где-то Сейчас он выглядит так мой роботс
Вот это поможет?
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.
И еще вот аналогичная проблема с пагинацией
(нажмите чтобы показать/скрыть)
Это поможет?
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.
Спасибо, пожалуйста, очень прошу помощи.
Захожу на этот славный форум раз в полг года, и каждый раз дивлюсь, каким же глупым я был в прошлое свое посещение.


Оффлайн Darius

  • Бизнес оценка: (0)
  • Ветеран
  • *****
  • СПАСИБО: 159
  • Сообщений: 525
  • Карма: 10
  • Пол: Мужской
  • В поисках новой идеи для сайта.
    • Просмотр профиля
    • Пицца на заказ, Камышин пиццерия"Сан-Ремо"

Оффлайн Darius

  • Ветеран
  • *****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 159
    • Сообщений: 525
    • Карма: 10
    • Пол: Мужской
    • В поисках новой идеи для сайта.
      • Просмотр профиля
      • Пицца на заказ, Камышин пиццерия"Сан-Ремо"
Re: И снова robots.txt
« Ответ #1 : 17-05-2011, 22:23:46 »
Ну движок то на ДЛЕ полюбому? У гугла есть одна фишка каторой нужно пользоваться.
Вот линк прочитайте эту тему http://3pu.info/canonical-url-tag/
Пицца на заказ в Камышине, бесплатная доставка. Пиццерия Сан-Ремо ул. Юбилейная 4.
Тел заказов: 8-909-39-039-39. И шикарная итальянка уже в Вашей компании!

Оффлайн ruslan_fdАвтор темы

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 82
  • Сообщений: 299
  • Карма: 19
  • Пол: Мужской
  • SEOщник
    • Просмотр профиля

Оффлайн ruslan_fdАвтор темы

  • Старожил
  • ****
Re: И снова robots.txt
« Ответ #2 : 18-05-2011, 07:28:13 »
Угу. Дле, он засланец... :(
Спасибо, почитаю
Захожу на этот славный форум раз в полг года, и каждый раз дивлюсь, каким же глупым я был в прошлое свое посещение.

Оффлайн AndMonster

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 12
  • Карма: 1
  • Пол: Мужской
    • Просмотр профиля
    • Кулинарная книга

Оффлайн AndMonster

  • Рекрут
  • *
Re: И снова robots.txt
« Ответ #3 : 23-05-2011, 00:58:07 »
Отключи функцию вывода архивов и запрети их вывод в robots.txt:
Disallow /2011
Disallow /2010
и т.д. по надобности.
Кулинарные рецепты салатов [nofollow] - вкусно и быстро!

Оффлайн ruslan_fdАвтор темы

  • Бизнес оценка: (0)
  • Старожил
  • ****
  • СПАСИБО: 82
  • Сообщений: 299
  • Карма: 19
  • Пол: Мужской
  • SEOщник
    • Просмотр профиля

Оффлайн ruslan_fdАвтор темы

  • Старожил
  • ****
Re: И снова robots.txt
« Ответ #4 : 23-05-2011, 10:30:48 »
Ага, так и сделал.
Вопрос, нужно делать со слешем (Disallow: /2011/) или без(Disallow: /2011)?
Захожу на этот славный форум раз в полг года, и каждый раз дивлюсь, каким же глупым я был в прошлое свое посещение.


Оффлайн Darius

  • Бизнес оценка: (0)
  • Ветеран
  • *****
  • СПАСИБО: 159
  • Сообщений: 525
  • Карма: 10
  • Пол: Мужской
  • В поисках новой идеи для сайта.
    • Просмотр профиля
    • Пицца на заказ, Камышин пиццерия"Сан-Ремо"

Оффлайн Darius

  • Ветеран
  • *****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 159
    • Сообщений: 525
    • Карма: 10
    • Пол: Мужской
    • В поисках новой идеи для сайта.
      • Просмотр профиля
      • Пицца на заказ, Камышин пиццерия"Сан-Ремо"
Re: И снова robots.txt
« Ответ #5 : 24-05-2011, 16:26:44 »
Я конечно не знаю как было бы идеально но у меня на сайте
Disallow: /2011/$
Пицца на заказ в Камышине, бесплатная доставка. Пиццерия Сан-Ремо ул. Юбилейная 4.
Тел заказов: 8-909-39-039-39. И шикарная итальянка уже в Вашей компании!

Оффлайн mixa33rus

  • Бизнес оценка: (0)
  • Ветеран
  • *****
  • СПАСИБО: 219
  • Сообщений: 937
  • Карма: 50
  • Пол: Мужской
  • Награды КМС поисковой оптимизации
    • Просмотр профиля

Оффлайн mixa33rus

  • Ветеран
  • *****
Re: И снова robots.txt
« Ответ #6 : 24-05-2011, 18:53:40 »
Цитировать
Ага, так и сделал.
Вопрос, нужно делать со слешем (Disallow: /2011/) или без(Disallow: /2011)?

Disallow: /2011

Цитировать
Disallow: - разрешение индексировать всё содержимое сайта,
Disallow: / - запрет на индексацию всего сайта.
Disallow: /name – запрет на индексацию любых файлов и директорий, которые называются или имеют в своём названии name.
Disallow: /name/ - запрет на индексацию директории name.
Disallow: /*.gif$ - запрет на индексацию всех файлов, имеющих расширение .gif.
Disallow: /name.php – запрет на индексацию файла name.php.
Disallow: /name.php?action=print – запрет индексации переменной, например, страниц для печати.
Allow: / - всё наоборот (разрешается индексировать), синтаксис такой же, как и с Disallow
# - при помощи решётки можно писать комментарии: они не учитываются роботами поисковых систем и носят сугубо информативный  характер.

http://dataword.info/robots.php

p.s. 500 сообщений))) :P
Побеждает в этой жизни только тот, кто победил сам себя. Кто победил свой стрaх, свою лень, и свою неуверенность.

Оффлайн AndMonster

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 0
  • Сообщений: 12
  • Карма: 1
  • Пол: Мужской
    • Просмотр профиля
    • Кулинарная книга

Оффлайн AndMonster

  • Рекрут
  • *
Re: И снова robots.txt
« Ответ #7 : 28-05-2011, 15:31:31 »
Вообще-то с Disallow: /2011 ты можешь заодно и новость какую-нибудь, где в начале стоит 2011 запретить к индексации, но если таковых не предвидится, то можно и так. По моему правильнее будет всё-таки со слешем в конце.
Кулинарные рецепты салатов [nofollow] - вкусно и быстро!


 

Похожие темы

  Тема / Автор Ответов Последний ответ
11 Ответов
2552 Просмотров
Последний ответ 26-06-2011, 21:38:32
от [Lichkin-rus]
3 Ответов
1345 Просмотров
Последний ответ 10-07-2011, 02:12:32
от Zegeberg
10 Ответов
3211 Просмотров
Последний ответ 22-02-2012, 10:57:59
от Shveik
0 Ответов
482 Просмотров
Последний ответ 24-05-2015, 14:33:19
от Dominika Rose
33 Ответов
6015 Просмотров
Последний ответ 11-08-2016, 10:36:41
от Русская-Майолика