Клуб Яндекс.Поиска для сайта

Защита от роботов в Яндекс.Поиске для сайта

Вульбрун Дмитрий
29 августа 2013, 14:02

Авторами поисковых запросов на вашем сайте могут быть не только пользователи, но и роботы - программы, созданные специально для автоматической отправки запросов.

Например, при обнаружении на странице сайта html-тега <form> такие программы принимают его за форму отправки комментария и отправляют в форму запросы вида [url=http://vpupkin.ru/page.html]Личный супер-сайт Васи Пупкина, все сюда![/url], пытаясь разместить спамерские ссылки.

Такое использование поиска искажает статистику запросов, мешает вам анализировать поведение пользователей на вашем сайте.

Сегодня в Поиске для сайта запущены алгоритмы блокирования роботных запросов. Когда система распознает автоматические запросы, роботу вместо результатов поиска предлагается ввести капчу. В случае, если Поиск покажет капчу реальному пользователю, он легко ее разгадает. После этого система "запомнит" его и не будет беспокоить в дальнейшем.

Если вам действительно нужно отправлять Яндексу автоматические запросы, напоминаем, что для вежливых роботов существует специальный сервис, который называется Яндекс.XML.

 

Команда Яндекс.Поиска для сайта.
Мы за чистый веб!