Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....

 

Удалить старую страницу с кодом 404

Автор gmurman, 07-11-2016, 21:15:22

« назад - далее »

gmurmanTopic starter

Привет!
Необходимо удалить старую страницу(а точнее несколько) из индекса поисковика.
Как лучше это сделать?
Спасибо.
  •  


Гарик+

Заходишь в яндекс вебмастер и удаляешь там есть теперь такая функция.


borzoid

#2
Для удаления страниц из индекса поисковика есть несколько способов. Один из них - использование файла robots.txt. Вы можете добавить запрет на индексацию этих страниц в файле robots.txt, указав путь к ним. Однако, это не гарантирует полной и быстрой индексации.

Другой способ - использование тега meta noindex на каждой странице, которую вы хотите удалить из индекса. Этот тег указывает поисковым системам, что данная страница не должна быть проиндексирована.

Важно отметить, что эти методы могут принести результаты, но поисковые системы все равно могут сохранять информацию о вашей странице в кеше или индексировать ее заново в будущем. Если вы хотите навсегда удалить страницы из поисковой выдачи, рекомендуется связаться с операторами поисковых систем напрямую.

Еще один способ удалить страницы из индекса поисковика - это использование инструментов вебмастера поисковых систем, таких как Google Search Console или Яндекс.Вебмастер. В этих инструментах вы сможете указать страницы, которые вы хотите удалить из индекса. После отправки запроса поисковая система обработает его и удалит страницы из своего индекса.

Также стоит упомянуть, что время, необходимое для полного удаления страницы из индекса, может варьироваться в зависимости от поисковой системы и других факторов. В некоторых случаях процесс может занять несколько дней или недель.

shemrock

Ну 100% вариант в robots.txt запрещаешь через disallow, ну и я бы сайт посоветовал проскaнировать на наличие ссылок на эту страницу.
  •  

inkanus.gray

На мой взгляд лучше всего комплексный подход:
1. Вернуть код 404.
2. Добавить удаляемую страницу в robots.txt (после того, как она исчезнет из выдачи во всех ПС, можно robots.txt почистить).

Если удаляемых страниц немного, то можно ещё запросить удаление в Вебмастере.

Почему одного средства недостаточно? Индексаторы скaнируют сайт очень медленно. Если сайт большой, то до страницы, возвращающей 404, они могут добраться через несколько месяцев. Правила из Robots.txt для уже проиндексированных страниц тоже применяются с задержкой.
  •  


shemrock

Цитата: inkanus.gray от 08-11-2016, 19:00:13Индексаторы скaнируют сайт очень медленно.
Не совсем так. Сканируют долго, а анализируют запреты robots очень быстро (относительно). На одном проекте яндекс загрузил около 70 000  страниц (всякие, фильтры, параметры итд). В роботс были запрещены ненужные страницы и через неделю они стали пропадать из загруженных со скоростью 2-7 тысяч страниц в сутки.


Цитата: inkanus.gray от 08-11-2016, 19:00:13Вернуть код 404.

Не очень понял что это значит. Куда его вернуть если запрашиваемая страница и так отдает код 404?

  •  

inkanus.gray

Цитата: shemrock от 08-11-2016, 19:08:10
Куда его вернуть если запрашиваемая страница и так отдает код 404?

Значит, я неправильно выразился. Если страница уже отдаёт код 404, то всё хорошо.

Цитата: shemrock от 08-11-2016, 19:08:10
через неделю они стали пропадать из загруженных со скоростью 2-7 тысяч страниц в сутки.

Тогда и правда robots.txt — самый удобный вариант.
  •  

shemrock

Цитата: inkanus.gray от 08-11-2016, 19:28:16Тогда и правда robots.txt — самый удобный вариант.

Надо проверять, я не тестировал инструмент в вебмастере. В этом деле нельзя говорить однозначно :D
  •  


gmurmanTopic starter

Тогда роботс, так как страниц около 800. Спасибо)
  •  

shemrock

Цитата: gmurman от 08-11-2016, 21:24:52
Тогда роботс, так как страниц около 800. Спасибо)

Советую изучить операторы в роботс чтоб не добавлять 800 строчек ))
  •  



Если вам нравится SbUP Форум, вы можете поддержать его - BTC: bc1qppjcl3c2cyjazy6lepmrv3fh6ke9mxs7zpfky0 , TRC20 и ещё....