Комбинированный метод

При определении робота можно пользоваться одновременно двумя выше­описанными методами: сначала определить запрос из определенной сети IP-ад­ресов, после чего сразу проверить данные в поле User-agent.

Если не задаваться целью обмануть поисковую систему, то метод формиро­вания страницы в зависимости от некоторых параметров из запроса браузера может быть использован, так сказать, во благо. Приведем несколько вариантов такого использования:

• выдача пользователю страницы на том языке, который указан в настрой­ках его браузера;
• перенаправление пользователя на ближайшее зеркало сайта в зависимос­ти от местонахождения пользователя;
• выдача версии страницы, корректно отображающейся в специфическом браузере пользователя, и многое другое.

При использовании клоакинга или методов, близких к нему, следует пом­нить, что поводом для бана сайта служит явная попытка обмана поисковой системы. Если же вы заботитесь о пользователе, то модераторы поисковика не должны забанить сайт за использование клоакинга.

Еще надо отметить, что робот поисковой системы будет получать только одну из всех возможных версий документа. Например, при выдаче разных языковых версий GoogleBot (поисковый робот Google), скорее всего, получит англоязыч­ную версию страницы и не догадается о русскоязычной, а робот Яндекса про­индексирует русскоязычную и не увидит остальных версий, если на них явно не сослаться.

¹ IP-адрес — это уникальный адрес каждого компьютера в Интернете. Представляет собой четыре числа от 0 до 255, разделенные точками, например 213.180.206.248.