Что делать redireсt или disallow

immortal727 · 09-09-2016, 11:55:29

Есть большой интернет-магазин и множество товаров. Сайт переделывался и структура сильно изменилась. Слышал, что redirect лучше не делать, а просто в роботе закрывать url-ы с 404, так ли это?

borzoid · 09-09-2016, 12:06:34

immortal727, Вы смешали все в одно. Либо закрывать в роботсе либо уж 404. Закрытие в роботсе дурной и неэффективный метод

immortal727 · 09-09-2016, 12:10:42

И что же я смешал? 404 настроена корректно.

borzoid · 09-09-2016, 12:12:15

Цитата: immortal727 от 09-09-2016, 12:10:42
И что же я смешал? 404 настроена корректно.

Зачем тогда запрет в роботсе?
Вы даете 404 ответ странице, чтобы поисковик понял, что ее надо выкинуть и в тоже время директивой в роботсе пытаетесь ее запретить к просмотру (поисковиком).

immortal727 · 09-09-2016, 12:18:50

Просто хочется вообще исключить все страницы с 404 ошибкой. Яндекс-то всё равно видит эту страницу и она идет в индекс. Вот и думаю, может лучше тогда редирект сделать в .htaccss если в роботе вообще лучше не запрещать, как советуете. А то мне совсем противоположную информацию дали, якобы лучше в роботе

borzoid · 09-09-2016, 13:32:48

immortal727, Я вам сказал как правильно. Это не теория и домыслы, а все в результате опыта.
И прекрасно, что яндекс видит 404 ошибку. 404 ответ сервера это сигнал поисковику, что страницы не существует. В течении нескольких АПов она уйдет из индекса.
Если закроете в роботсе, то в Яндексе это пока что прокатит, в гугле же такая страница останется навечно.
Директиву роботс Диселоу стоит использовать лишь при первичной настройке, для тех страниц, что еще не успели попасть в индекс.

vold57 · 09-09-2016, 13:38:27

Цитата: immortal727 от 09-09-2016, 12:18:50А то мне совсем противоположную информацию дали

[spoiler]Ну так сделайте противоположные действия и наслаждайтесь.[/spoiler]

Anyue-SEO · 09-09-2016, 13:39:57

А структура где поменялась? Например:

Главная/категория1/статья1 изменилась на Главная/категория1/статья2 ?
И содержимое одно и то же? Если да, то редиректом можно решить эту проблему.

vold57 · 09-09-2016, 14:33:48

Цитата: Anyue-SEO от 09-09-2016, 13:39:57Если да, то редиректом можно решить эту проблему.

Сейчас, вообще, неизвестно, есть проблема или нет, и если есть, то какая. Непонятно когда именно сайт переделывался, что при этом было сделано и какая текущая ситуация. А вопрос ТС больше похож на теоретический:

Цитата: immortal727 от 09-09-2016, 11:55:29Сайт переделывался и структура сильно изменилась. Слышал, что redirect лучше не делать, а просто в роботе закрывать url-ы с 404, так ли это?

Ну а так, можно, если скучно "подагадываться", например, о том, что если появились страницы с 404 ошибкой, то при смене структуры, редирект не делался. В общем, все как обычно - ситуация четко с хронологией не описана, проблема не обозначена.

Sky-fi · 09-09-2016, 14:35:38

Цитата: immortal727 от 09-09-2016, 11:55:29Слышал, что redirect лучше не делать, а просто в роботе закрывать

Цитата: immortal727 от 09-09-2016, 12:18:50А то мне совсем противоположную информацию дали

У меня возникают сомнение в компетентности спецов, дающих подобные советы.

Как поступить правильно.
1. Есть магазин, с посещаемостью 1000 человек (например) в сутки.
2. Переделываем сайт, меняем структуру урлов. Дальше два варианта:
а) ничего не делаете, сайт получает кучу 404, вылетает из выдачи по релевантнымы 404 страницам, проседает по тем, которые остались в индексе, сайт теряет весь трафик;
б) настраиваем постраничные редиректы, ничего нигде не закрываем - вместо 404 получаем кучу 301 ответов, что уже является нормальным явлением при переезде сайта. В выдаче сайт немного проседает, потом возвращается. Трафик падает временно и незначительно.
Так какой вариант лучше?