Ce site raconte comment ils luttent contre les bots.
Ils ont fait la même constatation que moi : À moins d'être une cible connue (Wikipedia, Reddit...), les bots n'exécutent pas javascript (probablement à cause du coût CPU). Ce qui est une bonne arme pour les tenir à distance (cf. ma solution stupide
https://sebsauvage.net/wiki/doku.php?id=stupidantibot).
L'article mentionne une statistique : On estime que 51% du trafic mondial serait désormais dû aux bots.
L'auteur pense qu'en réalité c'est bien pire que ça : Ce pourcentage a été évalué en fonction de la source des adresses IP. N'ont donc pas été comptés dedans le trafic des fournisseurs d'accès (ADSL, fibre et mobile). Or on sait que désormais ces IP sont massivement utilisées par les bots à travers des proxys.
Donc le pourcentage de trafic internet dû aux bots est probablement *massivement* plus important que 51%. L'auteur l'estime à 70%. Et je pense qu'il est dans le vrai.
EDIT: Ayant récemment remis le nez dans mes logs Apache afin de mettre en place une solution contre les bots, je peux vous confirmer - grosso-modo - ce pourcentage de 70. Ouais c'est moche. Et encore, je suis un petit site, à des années lumières de Wikipédia.