Добрый день, уважаемые форумчане!
Появилось два сайта ((http://obmenajka.ru (http://obmenajka.ru) и http://kredit-angel.ru (http://kredit-angel.ru))) и встал вопрос о быстрой их индексации - т.к. на 1-ом сайте вроде более 20.000 страниц - и ждать индексации от ПС месяцами не хотелось бы... :(
Кто подскажет словом или делом, можно и за небольшую мзду, как их быстро вогнать в индекс?
Заранее спасибо всем кто откликнулся!!!
p.s. Теорию просьба не писать - читать умею, если можно реально проверенные способы, спасибо!
В твиттер загонте :)
Такое количество страниц, Вы в любом случае не вгоните в индекс сразу все, т.к. присутствие количества страниц индексе напрямую завязано на пф сайта, а откуда у нового сайта хорошие пф.
Цитата: alexburn от 19-12-2016, 13:54:17
В твиттер загонте :)
Если ТС все 20000, то Гугл за такой спaм метод вообще может сайт выкинуть из индекса(оставит пару десятков страниц.
Цитата: Владимир75 от 19-12-2016, 13:54:34
Такое количество страниц, Вы в любом случае не вгоните в индекс сразу все, т.к. присутствие количества страниц индексе напрямую завязано на пф сайта, а откуда у нового сайта хорошие пф.Если ТС все 20000, то Гугл за такой спaм метод вообще может сайт выкинуть из индекса(оставит пару десятков страниц.
А если начать со страниц 100-500 - какой лучше способ использовать?
Добавлено: 19-12-2016, 14:02:35
Цитата: alexburn от 19-12-2016, 13:54:17
В твиттер загонте :)
Я же говорил про теорию выше! ;)
Твитер у меня есть, но не руками же? :))) Да и каким сервисом тогда?
И потом - 20.000 стр. * цена твита = много много денюжек - Это не вариант! :)
Да и Владимир75 - подтвердил - что это опасно! :(
Начинайте на даже 500ссылок с хороших твиттер аккаунтов(а не с живых, толку не будет), это много за раз, да проще пинговать, чем твиттер использовать, дешевле выйдет.
Цитата: Владимир75 от 19-12-2016, 14:02:37
Начинайте на даже 500ссылок с хороших твиттер аккаунтов(а не с живых, толку не будет), это много за раз, да проще пинговать, чем твиттер использовать, дешевле выйдет.
Начать с сотни, не больше?
Пинговать руками? Или сервисом?
Или через add url в ПС-ах как вариант??? (В яше 10 ссылок в день...)
Цитата: Владимир75 от 19-12-2016, 13:54:34то Гугл за такой спaм метод вообще может сайт выкинуть из индекса(оставит пару десятков страниц.
тем более что контент скорее всего неуникальный...
Посмотрел только obmenajka.ru. Скорость индексации зависит от качества сайта, от частоты появления свежей информации. В случае с этим сайтом для ПС нет необходимости его не то, что быстро, а хоть как-то со средней скоростью индексировать. Устаревшие даты, неуникальный контент, плохое юзабилити. Отсутствует форматирование контента. А это, в отличие от ссылочного, ПС видят мгновенно.
Другими словами, для того, чтобы ПС быстро индексировали сайт, им нужны основания. В данном случае таких оснований нет.
Цитата: vold57 от 19-12-2016, 14:17:46
Посмотрел только obmenajka.ru. Скорость индексации зависит от качества сайта, от частоты появления свежей информации. В случае с этим сайтом для ПС нет необходимости его не то, что быстро, а хоть как-то со средней скоростью индексировать. Устаревшие даты, неуникальный контент, плохое юзабилити. Отсутствует форматирование контента. А это, в отличие от ссылочного, ПС видят мгновенно.
Другими словами, для того, чтобы ПС быстро индексировали сайт, им нужны основания. В данном случае таких оснований нет.
Просто ранее такой сайт сам вошел в индекс, правда этот контент добавлялся постепенно...
Как я понимаю - времена серьезно изменились, и то что было раньше - уже не повторится???
Цитата: budavnik от 19-12-2016, 14:29:27
Просто ранее такой сайт сам вошел в индекс, правда этот контент добавлялся постепенно...
Как я понимаю - времена серьезно изменились, и то что было раньше - уже не повторится???
Ну, дело не только во временах. Да, изменились. Но если вы в какой-то момент времени сделаете ряд одинаковых сайтов, то ПС по отношению к ним не поведет себя абсолютно одинаково.
Попробую поэкспериментировать по-быстрому - добавил карту сайта и в аддурилку Яши и Гоши и опубликовал пару твиттов - посмотрим на результат...
Цитата: budavnik от 19-12-2016, 15:50:23посмотрим на результат.
посмотреть как гугльбот тож попробуйте - только в индекс отправьте не один урл а все связанные - там ограничение 10 запросов в месяц
Мои наблюдения:
1. Для поисковика Бинг обязательно нужно сделать sitemap.xml. И не просто сделать, а отправить ему через панель вебмастера ( http://www.bing.com/toolbox/webmaster/ ). У Ваших сайтов sitemap.xml есть, но у первого сайта карта не указана в robots.txt.
У русскоязычной аудитории популярность Бинга даже меньше, чем у go.mail.ru, но всё-таки индекс не помешает, да и другим поисковым системам будет лучше, если они захватят карту сайта. Кстати, в Гугл и в go.mail.ru тоже желательно явно отправить карту ( https://www.google.com/webmasters/ и http://webmaster.mail.ru/ соответственно). В Google Search Console нужно периодически поглядывать, потому что Гугл может не сразу сообщить о том, что нашёл ошибки в карте сайта.
2. Гугл хорошо индексирует сайт, если есть RSS. Эту же RSS-ленту можно автоматически загнать в Твиттер с помощью сервиса dlvr.it (его аналоги twitterfeed и rss2twitter закрылись). У Твиттера должно быть немаленькое количество подписчиков, а также хорошо бы, если бы хоть изредка кто-то делал ретвиты или лайки. Ни в коем случае не нужно ретвитить каждый твит со своего второго аккаунта, потому что Твиттеру это может не понравиться.
3. В Яндекс странички загоняют живые пользователи, если на сайте установлена Метрика (в настройках должна быть галочка «отправлять на индексацию») или хотя бы панелька share.yandex.ru.
Это всё лишь мои субъективные наблюдения с очень маленькой выборкой, так что я могу и ошибаться.
Ну что ж, дорогие друзья!
Результат на лицо:
1) obmenajka.ru
- Y - Нашлось 72 результата
- G - Результатов: примерно 316 (0,25 сек.)
2) kredit-angel.ru
- Y - Нашлось 47 результатов
- G - А вот здесь опять куча вопросов??? В консоли ошибок нет, банов нет, фильтров нет, и страниц в индексе все еще нет???
Не могу понять в чем дело???
budavnik, уберите директиву Allow: из файла robots.txt.
Цитата: inkanus.gray от 20-12-2016, 08:29:51уберите директиву Allow: из файла robots.txt
А для чего? Гугля не переваривает эту инструкцию ?
alexburn, и правда, похоже, что я предложил глупость. По умолчанию индексация URL разрешена, если явно нет запрета, так что Allow картину не испортит.
P.S. А как поисковики реагируют на строчку Disallow: /*?* ?
bulkaddurl.com (http://bulkaddurl.com/bonus/5239) вот этот сервис поможет, аддурлит в гугл страницы, может аддурлить через xml. Цена 0,015$ за урл. В индекс гугла попадает мгновенно.
Цитата: inkanus.gray от 20-12-2016, 08:46:26P.S. А как поисковики реагируют на строчку Disallow: /*?* ?
Анализ robots.txt (https://webmaster.yandex.ru/tools/robotstxt/)
Цитата: inkanus.gray от 20-12-2016, 08:29:51
budavnik, уберите директиву Allow: из файла robots.txt.
Вы по-видимому перепутали: allow - позволять, разрешать, допускать, с disallow - запрещать???
Добавлено: 20-12-2016, 12:31:45
Цитата: vold57 от 20-12-2016, 12:26:45
Анализ robots.txt (https://webmaster.yandex.ru/tools/robotstxt/)
Результаты анализа robots.txt - 0 ошибок...
budavnik, этим инструментом можно проверять и различные варианты запретов и разрешений, которых нет в вашем файле robots.txt. Прописываете исследуемые варианты и проверяете, приводят они к нужным действиям или нет.
Цитата: vold57 от 20-12-2016, 14:40:47
budavnik, этим инструментом можно проверять и различные варианты запретов и разрешений, которых нет в вашем файле robots.txt. Прописываете исследуемые варианты и проверяете, приводят они к нужным действиям или нет.
Так тут и вопрос - с какой стороны начать проверять то? Внешне - везде все чисто... А Гугль упoрно не индексирует второй сайт :(
Добавлено: 20-12-2016, 14:56:25
Все! Решено! :)
Разгадка найдена: Меры, предпринятые вручную - Агрессивный СПАМ (правда что это было осталось тайной) :)))
Цитата: budavnik от 20-12-2016, 14:47:11Так тут и вопрос - с какой стороны начать проверять то? Внешне - везде все чисто... А Гугль упoрно не индексирует второй сайт :(
Я этот инструмент привел потому, что возник вопрос:
Цитата: inkanus.gray от 20-12-2016, 08:46:26P.S. А как поисковики реагируют на строчку Disallow: /*?* ?
Что касается вашего сайта, то я бы выделил бы дней 10 и постарался бы все что можно исправить/улучшить. Потом уже решал бы вопросы по более быстрой индексации.
В любом случае время потребуется, если бы каждый мог быстро - был бы хаос ) 8)