Джон Мюллер: как заблокировать Google доступ к тестовому сайту

Во время последней видеовстречи для вебмастеров сотрудник Google Джон Мюллер рассказал, как заблокировать поисковику доступ к тестовому серверу. Обычно для блокировки индексации тестовых сайтов создаётся файл robots.txt, который запрещает поисковикам сканировать страницы ресурса. Джон Мюллер предложил более эффективное решение. В частности, он рекомендует использовать аутентификацию на стороне сервера. «В идеале нужно обеспечить server-side аутентификацию на […] Сообщение Джон Мюллер: как заблокировать Goog...