Tag: роботы

Обнаружение честных веб-сканеров

Я хотел бы обнаружить (на стороне сервера), какие запросы от ботов. На данный момент меня не волнуют злые боты, просто те, которые играют хорошо. Я видел несколько подходов, которые в основном связаны с совпадением строки пользовательского агента с такими ключевыми словами, как «бот». Но это кажется неудобным, неполным и неподвластным. Так у кого-то есть более […]