Джон Мюллер: как заблокировать Google доступ к тестовому сайту

Во время последней видеовстречи для вебмастеров сотрудник Google Джон Мюллер рассказал, как заблокировать поисковику доступ к тестовому серверу.

Обычно для блокировки индексации тестовых сайтов создаётся файл robots.txt, который запрещает поисковикам сканировать страницы ресурса.

Джон Мюллер предложил более эффективное решение. В частности, он рекомендует использовать аутентификацию на стороне сервера.

«В идеале нужно обеспечить server-side аутентификацию на сервере, чтобы пользователи, включая Googlebot, не могли видеть контент. Это можно сделать на основе IP-адреса, с помощью cookie или обычной аутентификации на сервере… Мне кажется, что это наилучший подход для тестовых серверов», — сказал Мюллер.

Он также напомнил, что если на страницу есть ссылки с других ресурсов, то Google может переходить по ним и сканировать содержимое, несмотря на запрет в файле robots.txt.

Прослушать ответ Мюллера можно, начиная с отметки 42:30 на видеозаписи ниже:



Коды для вставки в блог\форум




Интересные новости
Криптовалюта Dogecoin упала в цене после того, как её упомянул Илон МаскКриптовалюта Dogecoin упала в цене после того, как её упомянул Илон Маск
В США ввели чрезвычайное положение после кибератаки на бензопровод Colonial, за хакерами может стоять РоSSияВ США ввели чрезвычайное положение после кибератаки на бензопровод Colonial, за хакерами может стоять РоSSия
Маячок Apple AirTag впервые взломали — на это потребовалось менее 10 днейМаячок Apple AirTag впервые взломали — на это потребовалось менее 10 дней
Хакер наводнил сеть TOR тысячами вредоносных серверов для кражи криптовалюты у пользователейХакер наводнил сеть TOR тысячами вредоносных серверов для кражи криптовалюты у пользователей
Крупнейший оператор нефтепровода в США подвергся кибератакеКрупнейший оператор нефтепровода в США подвергся кибератаке
Блок рекламы


Похожие новости

Сервис Google Photos станет платнымСервис Google Photos станет платным
Google начнёт автоматически включать двухфакторную аутентификацию, чтобы повысить безопасность пользователейGoogle начнёт автоматически включать двухфакторную аутентификацию, чтобы повысить безопасность пользователей
Аргентинский Google упал на несколько часов из-за непродлённого домена — местный житель купил его всего за $6Аргентинский Google упал на несколько часов из-за непродлённого домена — местный житель купил его всего за $6
Google изменил название рейтинга из-за того, что назвал борщ русскимGoogle изменил название рейтинга из-за того, что назвал борщ русским
Discord заблокировала на iOS доступ к серверам с контентом для взрослыхDiscord заблокировала на iOS доступ к серверам с контентом для взрослых
Личные данные 533 млн пользователей Facebook появились в открытом доступеЛичные данные 533 млн пользователей Facebook появились в открытом доступе
Антимонопольный комитет оштрафовал Google на 1 млн гривенАнтимонопольный комитет оштрафовал Google на 1 млн гривен
Google продлила период бесплатного использования сервиса видеоконференций Meet до 30 июняGoogle продлила период бесплатного использования сервиса видеоконференций Meet до 30 июня
В Google Картах появилась навигация внутри помещений с элементами дополненной реальностиВ Google Картах появилась навигация внутри помещений с элементами дополненной реальности
Британия должна наращивать способность проведения кибератак, - ДжонсонБритания должна наращивать способность проведения кибератак, - Джонсон
Последние новости

Подгружаем последние новости