Как определить поискового робота?

Как мне отфильтровать попадания от веб-сканеров и т. Д. Хиты, которые не являются человеческими ..

Я использую maxmind.com, чтобы запрашивать город с IP-адреса .. Это не совсем дешево, если мне нужно платить для ВСЕХ обращений, включая веб-сканеры, роботов и т. д.