| 28 различные роботы | Хиты | Объем | Последний визит |
|---|
| Googlebot | 388,620+83 | 9.97 ГБ | 30 Апр 2021 - 23:58 |
| Unknown robot (identified by 'bot*') | 178,842+1453 | 9.55 ГБ | 30 Апр 2021 - 23:59 |
| Yandex bot | 102,861+1347 | 7.71 ГБ | 30 Апр 2021 - 23:59 |
| MJ12bot | 54,499+890 | 7.53 ГБ | 30 Апр 2021 - 23:28 |
| Unknown robot (identified by 'robot') | 21,408+115 | 1.63 ГБ | 30 Апр 2021 - 23:59 |
| bingbot | 20,824+237 | 1.61 ГБ | 30 Апр 2021 - 23:57 |
| Unknown robot (identified by 'spider') | 6,929+5 | 2.27 ГБ | 22 Апр 2021 - 20:29 |
| Web Core / Roots | 6,716 | 47.99 МБ | 30 Апр 2021 - 14:11 |
| Mail.ru bot | 2,821+383 | 320.58 МБ | 30 Апр 2021 - 23:59 |
| Unknown robot (identified by 'crawl') | 2,787+53 | 182.00 МБ | 29 Апр 2021 - 18:54 |
| Bing Preview bot | 341 | 58.20 МБ | 30 Апр 2021 - 14:38 |
| SeznamBot | 134+118 | 1.70 МБ | 29 Апр 2021 - 15:27 |
| Sogou Spider | 218 | 13.60 МБ | 27 Апр 2021 - 10:33 |
| Unknown robot (identified by empty user agent string) | 131 | 22.28 МБ | 30 Апр 2021 - 13:45 |
| StackRambler | 121 | 1.61 МБ | 23 Апр 2021 - 23:35 |
| Unknown robot (identified by hit on 'robots.txt') | 0+90 | 85.24 КБ | 29 Апр 2021 - 13:24 |
| FavIconizer | 83 | 3.24 МБ | 30 Апр 2021 - 06:50 |
| FaceBook bot | 29 | 1.07 МБ | 21 Апр 2021 - 21:48 |
| Unknown robot (identified by 'discovery') | 26 | 2.30 МБ | 28 Апр 2021 - 14:03 |
| Unknown robot (identified by '*bot') | 17+5 | 1.10 МБ | 29 Апр 2021 - 08:05 |
| Python-urllib | 10+2 | 428.69 КБ | 22 Апр 2021 - 23:47 |
| Custo | 8 | 2.97 МБ | 28 Апр 2021 - 09:25 |
| twitterbot | 6 | 489.31 КБ | 26 Апр 2021 - 12:15 |
| Common *nix tool for automating web document retireval. Most likely a bot. | 4 | 202.73 КБ | 20 Апр 2021 - 13:26 |
| Netcraft | 3 | 1.10 МБ | 05 Апр 2021 - 10:59 |
| Heritrix | 1+1 | 376.13 КБ | 02 Апр 2021 - 03:58 |
| CFNetwork | 2 | 9.58 КБ | 25 Апр 2021 - 08:56 |
| Sift | 1 | 72.53 КБ | 10 Апр 2021 - 13:36 |
|