Какой роботс для жумлы правильный?

Автор Тема: Какой роботс для жумлы правильный?  (Прочитано 3098 раз)

Оффлайн CLASSIKАвтор темы

  • Бизнес оценка: (2, 100%)
  • КМС
  • *****
  • СПАСИБО: 709
  • Сообщений: 2594
  • Карма: 78
  • Пол: Мужской
  • Награды КМС поисковой оптимизации За лучший ролик Лучший блог года За благотворительность

Оффлайн CLASSIKАвтор темы

  • КМС
  • *****
Этот?

User-agent: *
Disallow: /administrator/
Disallow: */20*
Disallow: */feed/
Disallow: */comments/
Disallow: /?s=
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?
Disallow: /go.php
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

User-agent: Yandex
Disallow: /administrator/
Disallow: */20*
Disallow: */feed/
Disallow: */comments/
Disallow: /?s=
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?
Disallow: /go.php
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: site.com

Или этот?

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: site.com


Оффлайн Ametist

  • Глобальный модератор
  • Бизнес оценка: (1, 100%)
  • *****
  • СПАСИБО: 2612
  • Сообщений: 3353
  • Карма: 405
  • Пол: Женский
  • Награды SEO-специалист Мастер поисковой оптимизации Более одной тысячи спасибо Отличный блог 2011 Почетный гражданин нашего форума

Оффлайн Ametist

  • Глобальный модератор
  • *****
Re: Какой роботс для жумлы правильный?
« Ответ #1 : 09-12-2011, 00:10:49 »
Если есть  комментарии, пользователи активно пользуются поиском,  создается архив по годам - то вариант первый

А вариант второй можно брать как шаблон, и потом дополнять под сайт
Хотя : Disallow: /?s=
Disallow: /*?
Disallow: /go.php

я бы и во второй прописала

Оффлайн Aleks_El_Dia

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 14
  • Сообщений: 51
  • Карма: 3
  • Пол: Мужской
  • AEDStudio
    • AEDStudio Joomla! Direction

Оффлайн Aleks_El_Dia

  • Пользователь
  • **
Re: Какой роботс для жумлы правильный?
« Ответ #2 : 09-12-2011, 14:33:16 »
Нужно четко понимать что и как нужно запретить для индексации. Для каждого сайта - свой robots.
Если хотите стандартное решение - используйте robots.txt который идет в установочном архиве.
Мой блог о Joomla - dia.org.ua

Оффлайн bat

  • Бизнес оценка: (3, 100%)
  • Ветеран
  • *****
  • СПАСИБО: 248
  • Сообщений: 916
  • Карма: 32
  • Пол: Мужской
  • было бы че...
    • Развлекательный портал 2Cool.ru

Оффлайн bat

  • Ветеран
  • *****
Re: Какой роботс для жумлы правильный?
« Ответ #3 : 09-12-2011, 15:14:49 »
нужно еще учесть какая у вас версия джумлы, и какие модули установлены. напишите версию, я вам дам нормальный robots.txt

Оффлайн Aleks_El_Dia

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 14
  • Сообщений: 51
  • Карма: 3
  • Пол: Мужской
  • AEDStudio
    • AEDStudio Joomla! Direction

Оффлайн Aleks_El_Dia

  • Пользователь
  • **
Re: Какой роботс для жумлы правильный?
« Ответ #4 : 09-12-2011, 16:32:42 »
нужно еще учесть какая у вас версия джумлы, и какие модули установлены. напишите версию, я вам дам нормальный robots.txt
Модули прячутся по умолчанию:
Код:
Только зарегистрированные пользователи могут видеть код. Пожалуйста, войдите или зарегистрируйтесь.А вот с компонентами сложнее.
Мой блог о Joomla - dia.org.ua


Оффлайн CLASSIKАвтор темы

  • Бизнес оценка: (2, 100%)
  • КМС
  • *****
  • СПАСИБО: 709
  • Сообщений: 2594
  • Карма: 78
  • Пол: Мужской
  • Награды КМС поисковой оптимизации За лучший ролик Лучший блог года За благотворительность

Оффлайн CLASSIKАвтор темы

  • КМС
  • *****
Re: Какой роботс для жумлы правильный?
« Ответ #5 : 09-12-2011, 17:14:18 »
bat, в личку

Оффлайн Choice

  • Бизнес оценка: (0)
  • Ветеран
  • *****
  • СПАСИБО: 249
  • Сообщений: 609
  • Карма: 17
  • Пол: Мужской
  • Если есть здоровье, то все остальное приложится
    • Компания CHOICE Очищение организма

Оффлайн Choice

  • Ветеран
  • *****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 249
    • Сообщений: 609
    • Карма: 17
    • Пол: Мужской
    • Если есть здоровье, то все остальное приложится
      • Компания CHOICE Очищение организма
Re: Какой роботс для жумлы правильный?
« Ответ #6 : 19-12-2011, 21:09:15 »
о друзья это уже для меня высшая математика, хотя математику нормально тянул.  может и мне кто нибудь поможет с роботс. мой сайт под именем. буду очень признателен. а то этот вопрос меня давно волнует.

Оффлайн bat

  • Бизнес оценка: (3, 100%)
  • Ветеран
  • *****
  • СПАСИБО: 248
  • Сообщений: 916
  • Карма: 32
  • Пол: Мужской
  • было бы че...
    • Развлекательный портал 2Cool.ru

Оффлайн bat

  • Ветеран
  • *****
Re: Какой роботс для жумлы правильный?
« Ответ #7 : 20-12-2011, 04:43:33 »
может и мне кто нибудь поможет с роботс.
Это какая версия? Напоминает 1.5
Если так, то вашего роботс вполне достаточно.

Оффлайн Choice

  • Бизнес оценка: (0)
  • Ветеран
  • *****
  • СПАСИБО: 249
  • Сообщений: 609
  • Карма: 17
  • Пол: Мужской
  • Если есть здоровье, то все остальное приложится
    • Компания CHOICE Очищение организма

Оффлайн Choice

  • Ветеран
  • *****
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 249
    • Сообщений: 609
    • Карма: 17
    • Пол: Мужской
    • Если есть здоровье, то все остальное приложится
      • Компания CHOICE Очищение организма
Re: Какой роботс для жумлы правильный?
« Ответ #8 : 20-12-2011, 12:31:49 »
да у меня Joomla 1.5 но поумолчанию не уверен что роботс нормально сделан. Вот автор вверху представил два варианта, а мне что то надо менять?


Оффлайн Gyorgy

  • Бизнес оценка: (2, 100%)
  • Ветеран
  • *****
  • СПАСИБО: 845
  • Сообщений: 858
  • Карма: 203
  • Пол: Мужской
  • SEO, создание сайтов недорого
  • Награды Мастер поисковой оптимизации
    • Блог о SEO-оптимизации и раскрутке сайтов

Оффлайн Gyorgy

  • Ветеран
  • *****
  • Доп. информация
    • Бизнес оценка: (2, 100%)
    • СПАСИБО: 845
    • Сообщений: 858
    • Карма: 203
    • Пол: Мужской
    • SEO, создание сайтов недорого
    • Награды Мастер поисковой оптимизации
      • Блог о SEO-оптимизации и раскрутке сайтов
Re: Какой роботс для жумлы правильный?
« Ответ #9 : 13-02-2012, 20:06:14 »
CLASSIK, Правильнее будет самый последний вариант.
Но, в правилах для всех поисковых роботов (User-agent: *) после последней директивы disallow создайте директиву Sitemap: и укажите урл карты сайта. И еще можно запретить индексацию папки cgi-bin
Там где User-agent: Yandex оставьте только директиву Host, все что выше относится также и для яндекса

Вот на всякий случай моя статья по robots.txt - http://kleparj.com/seo-sandbox/17-kak-sdelat-robots-txt-dlya-joomla-1-5
создание сайтов Киев, Украина - http://kleparj.com/services
Взаимная дружба в Instagram !


 

Похожие темы

  Тема / Автор Ответов Последний ответ
2 Ответов
1255 Просмотров
Последний ответ 18-07-2011, 22:02:58
от Космополитос Сергей
4 Ответов
1865 Просмотров
Последний ответ 06-10-2011, 23:40:59
от ewdokimow
11 Ответов
3180 Просмотров
Последний ответ 24-01-2012, 22:12:32
от Natalol
9 Ответов
2876 Просмотров
Последний ответ 15-02-2012, 18:48:20
от Gyorgy
1 Ответов
613 Просмотров
Последний ответ 04-03-2015, 17:54:09
от arsenkin