Вопрос по индексации сайта

[kovan]

Всем спасибо за ответы!

Лучше использовать мета-тег ноиндекс, нофоллоу.

Я так понимаю, эти мета, для того чтобы закрыть весь сайт, надо пихать в head?

[Sky-fi]

для того чтобы закрыть весь сайт, надо пихать в head?

Да, все верно. На каждой странице должен быть такой мета-тег. Есть даже рекомендация гугла по этому поводу - если сайт уже в выдаче, роботс может не помочь, поэтому и рекомендуют использовать мета-тег.

[kovan]

Да, все верно. На каждой странице должен быть такой мета-тег. Есть даже рекомендация гугла по этому поводу - если сайт уже в выдаче, роботс может не помочь, поэтому и рекомендуют использовать мета-тег.

Понял, большое спасибо!

[zanuda]

kovan, мне тут только что статья на глаза попалась - как раз для вас. Суть - эксперимент по переносу сайта с 1го домена на другой без 301 редиректа (и внутри есть ссылка на предыдущую часть - закрытие сайта от индексации). Почитайте, примите информацию к сведению: http://sosnovskij.ru/perenos-sajta-na-novyj-domen-bez-301-redirekta/

[HeriKola]

kovan, мне тут только что статья на глаза попалась - как раз для вас. Суть - эксперимент по переносу сайта с 1го домена на другой без 301 редиректа (и внутри есть ссылка на предыдущую часть - закрытие сайта от индексации). Почитайте, примите информацию к сведению: http://sosnovskij.ru/perenos-sajta-na-novyj-domen-bez-301-redirekta/ [nofollow]

прям вот то что искал, а тему новую не хотелось создавать, спасибо!)

[Joker666]

Самый простой способ попасть в индекс  это трафик от самого Google. И как же он к вам пришёл?

Скаут‑боты (не только Googlebot, но и BingPreview, Yandex‑Sniffer) сразу попадают в ваш IP‑диапазон, потому‑что ваш VPS‑провайдер запускает health‑check от имени Google.
Сервисные субдомены (*.example.com), которые автоматически генерируются в вашем CDN, уже прописаны в публичном DNS‑кэше Google.

[Genius Ideaing]

по каким причинам новый сайт проиндексировался гуглом

если вы открываете сайт в гугл хром, о вашем сайте уже знает поисковик гугл. гугл хром следит за пользователями

если вы открывали сайт в яндекс браузере, о вашем сайте уже знает поисковик Янд. Яндекс браузер следит  за своими пользователями