Редактирование файла robots.txt

Автор Тема: Редактирование файла robots.txt  (Прочитано 2073 раз)

Оффлайн iProger

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 6
  • Сообщений: 36
  • Карма: 0
  • Пол: Мужской
    • Просмотр профиля

Оффлайн iProger

  • Рекрут
  • *
Re: Редактирование файла robots.txt
« Ответ #10 : 18-07-2019, 14:41:40 »
у второй страницы не будет никакого контента, где тут уникальность?
На странице /portfolio будет портфолио. Для быстрых ссылок в сниппете - страница как раз подойдет.


Онлайн artur2k

  • Бизнес оценка: (1, 100%)
  • Рекрут
  • *
  • СПАСИБО: 32
  • Сообщений: 39
  • Карма: 6
    • Просмотр профиля

Онлайн artur2k

  • Рекрут
  • *
Re: Редактирование файла robots.txt
« Ответ #11 : 18-07-2019, 18:49:24 »
На странице /portfolio будет портфолио. Для быстрых ссылок в сниппете - страница как раз подойдет.
В таком случае на сайте будет куча дублей с закрытым контентом.
Инструменты seoшника https://artur2k.ru/tools/

Оффлайн iProger

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 6
  • Сообщений: 36
  • Карма: 0
  • Пол: Мужской
    • Просмотр профиля

Оффлайн iProger

  • Рекрут
  • *
Re: Редактирование файла robots.txt
« Ответ #12 : 18-07-2019, 18:58:23 »
будет куча дублей с закрытым контентом.
Почему? Имеете в виду пагинацию?
Дублей не будет, т.к. для индексации обычно открывают только первую страницу каталога.
Повторюсь, закрыть от индексации нужно кейсы на Глваной, а не в портфолио.

Онлайн artur2k

  • Бизнес оценка: (1, 100%)
  • Рекрут
  • *
  • СПАСИБО: 32
  • Сообщений: 39
  • Карма: 6
    • Просмотр профиля

Онлайн artur2k

  • Рекрут
  • *
Re: Редактирование файла robots.txt
« Ответ #13 : 19-07-2019, 00:43:52 »
Почему? Имеете в виду пагинацию?
Дублей не будет, т.к. для индексации обычно открывают только первую страницу каталога.
Повторюсь, закрыть от индексации нужно кейсы на Глваной, а не в портфолио.
Единственное отличие размещенных обычным образом ссылок от ссылок в теге <noindex> – это то, что текст (анкор) ссылки не будет проиндексирован.
В таком случае лучше rel="nofollow", который работает как для Яндекса, так и для Google. Но при использовании этого атрибута ссылка всё равно будет изучена роботом и по ней будет произведён переход, но без nofollow по ссылке будет передан вес адресату, а с nofollow вес будет сгорать.
Инструменты seoшника https://artur2k.ru/tools/

Оффлайн iProger

  • Бизнес оценка: (0)
  • Рекрут
  • *
  • СПАСИБО: 6
  • Сообщений: 36
  • Карма: 0
  • Пол: Мужской
    • Просмотр профиля

Оффлайн iProger

  • Рекрут
  • *
Re: Редактирование файла robots.txt
« Ответ #14 : 19-07-2019, 00:48:04 »
nofollow
Причем здесь nofollow?
ТС интересует как избавиться от дубля контента на главной и в портфолио.


Оффлайн Sky-fi

  • Глобальный модератор
  • Бизнес оценка: (9, 100%)
  • *****
  • СПАСИБО: 3776
  • Сообщений: 5396
  • Карма: 333
  • Пол: Мужской
  • Раскрутка сайтов
  • Награды Мастер поисковой оптимизации Более одной тысячи спасибо
    • Просмотр профиля
    • Частный SEO оптимизатор Sky-fi

Оффлайн Sky-fi

  • Глобальный модератор
  • *****
  • Доп. информация
    • Бизнес оценка: (9, 100%)
    • СПАСИБО: 3776
    • Сообщений: 5396
    • Карма: 333
    • Пол: Мужской
    • Раскрутка сайтов
    • Награды Мастер поисковой оптимизации Более одной тысячи спасибо
      • Просмотр профиля
      • Частный SEO оптимизатор Sky-fi
Re: Редактирование файла robots.txt
« Ответ #15 : 19-07-2019, 00:58:57 »
ТС интересует как избавиться от дубля контента на главной и в портфолио
ТС интересовался изначально, как закрыть страницу: my-site.com/portfolio. Из этого выходит, что данная страница не нужна.

Оффлайн Валентинка

  • Бизнес оценка: (0)
  • Пользователь
  • **
  • СПАСИБО: 0
  • Сообщений: 51
  • Карма: 0
  • Пол: Женский
  • Я пусичка :)-
    • Просмотр профиля

Оффлайн Валентинка

  • Пользователь
  • **
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 0
    • Сообщений: 51
    • Карма: 0
    • Пол: Женский
    • Я пусичка :)-
      • Просмотр профиля
Re: Редактирование файла robots.txt
« Ответ #16 : 19-07-2019, 10:17:26 »
Можно как то сгенерить файл robots.txt под свой сайт?
Веду блог Baby Group и паблик в вк Детские товары страничка в фб Детский магазин

Оффлайн vold57

  • Бизнес оценка: (6, 100%)
  • Мастер
  • *****
  • СПАСИБО: 5127
  • Сообщений: 7030
  • Карма: 281
  • Пол: Мужской
  • Награды Более трех тысяч спасибо Мастер поисковой оптимизации
    • Просмотр профиля
    • SEO, интернет-маркетинг, сайостроение

Оффлайн vold57

  • Мастер
  • *****
Re: Редактирование файла robots.txt
« Ответ #17 : 19-07-2019, 11:31:58 »
Можно найти типовой вариант для вашей CMS и потом в случае необходимости доработать.


 

Похожие темы

  Тема / Автор Ответов Последний ответ
5 Ответов
1601 Просмотров
Последний ответ 26-10-2013, 22:28:51
от jeekka
21 Ответов
2808 Просмотров
Последний ответ 25-03-2015, 07:48:56
от Rencontrez
4 Ответов
1369 Просмотров
Последний ответ 04-12-2015, 00:13:59
от Вадим Костин
6 Ответов
1446 Просмотров
Последний ответ 28-01-2016, 16:57:24
от jansen
5 Ответов
2044 Просмотров
Последний ответ 15-08-2018, 23:54:45
от vold57