Google: как скрыть сайт из результатов поиска

В новом видео #AskGooglebot Джон Мюллер ответил на вопрос, можно ли скрыть сайт из результатов поиска и как это сделать.

Сайт можно скрыть из выдачи. Есть три способа, как это сделать.

Защитить паролем

Это лучший подход если нужно, чтобы сайт оставался конфиденциальным. Пароль гарантирует, что ни поисковые системы, ни пользователи не смогут увидеть контент.

Если сайт ещё не готов, то опубликовать его и закрыть паролем – обычная практика. Так клиенты смогут оценить промежуточный резльтат, но у Google не будет доступа к сайту.

Блокировать сканирование в robots.txt

Пользователи смогут получить доступ к сайту по прямой ссылке, а поисковые системы нет. Это не лучший способ, потому что иногда поисковые системы индексируют сайт без доступа к контенту. Такое случается редко, но всё же.

Блокировать индексацию

Для этого нужно добавить метатег noindex на страницу: < meta name = "robots" content = "noindex" >

Метатег noindex сообщает поисковым системам, что страницу не надо индексировать. При этом пользователи по-прежнему видят эту страницу.

Если коротко

Для конфиденциального контента Мюллер рекомендует использовать защиту с помощью пароля. Так никто не получит доступ к вашему контенту.

Можно заблокировать сканирование или индексирование. Это хорошие варианты, если контент не конфиденциальный или если нужно, чтобы определённые части сайта не появлялись в поиске.

Ответ Мюллера можно посмотреть в коротком видео: