Как определить роботность и отследить ботов в отчете по трафику

Данные о трафике могут серьезно искажаться наплывом «пауков» и роботов — специальных ботов для мониторинга. Среди них бывают «полезные» — анализирующие релевантность страницы с точки зрения поисковых сетей. Но также часть неестественного трафика составляют «вредные» роботы — боты для парсинга, спама и имитации живого трафика. В некоторых случаях бывает полезно смотреть весь трафик целиком, чтобы […]...