AdsBot-Google – это робот поисковой системы Google, который сканирует и определяет качество страниц, на которых подключена контекстная реклама AdWords. Он предназначен для проверки качества и определении релевантности объявления, что помогает установить оптимальную стоимость за клик. В некоторых случаях, когда сайт скрыт от индексации всех ботов в файле robots.txt, AdsBot-Google позволяет поисковой системе получить представление о нем
Контроль доступа робота AdsBot-Google к сайту
Контролировать доступ AdsBot-Google к своему сайту можно различными методами: через файл robots.txt, через метатеги или специальный файл .htaccess.
Документ robots.txt должен располагаться в корневом каталоге интернет-ресурса. Качественный бот, перед тем как работать с другими страницами сайта, просматривает его. Если он будет запрещен, тогда роботы не проанализируют страницу.
Чтобы закрыть доступ AdsBot-Google к любой части сайта, необходимо в robots.txt указать:
User-agent: AdsBot-Google
Disallow:/
Использование метатегов для контроля доступа AdsBot-Google
Чтобы запретить доступ AdsBot-Google к части страницы на сайте, необходимо перед ней вставить тег: <meta name="AdsBot-Google" content="noindex">. Для закрытия данной области нужно прописать <meta name="AdsBot-Google" content="index">.
