Regardez autour de vous, les gens du Web. Les robots d’exploration. Ils sont partout. La plupart des visiteurs ne sont pas des êtres humains, mais plutôt des robots d’exploration ou des programmes conçus pour effectuer des tâches automatiques. Ce sont des abeilles ouvrières sur le World Wide Web, plus les hommes de main. Certains robots d’exploration aident à recharger votre Facebook ou Twitter ou à apprendre à classer les résultats finaux de la recherche sur Internet; d’autres robots se font passer pour des humains et exécutent des épisodes DDoS dévastateurs. En général, les robots – mauvais et bons – sont responsables de 52% du trafic Web, selon complètement un autre document de la société de protection Imperva, qui remet en question une analyse annuelle de l’activité des robots sur le Web. La statistique de 52 pour cent est importante principalement parce qu’elle symbolise une astuce de la balance, car le document de l’année précédente, qui localisait le trafic ciblé par l’homme, avait initialement dépassé le trafic du site Web des robots, étant donné qu’au moins 2012, lorsque Imperva a commencé à surveiller l’action des robots sur Internet. Maintenant, la dernière étude, qui dépend d’une évaluation de près de 17 milliards de dollars de rendez-vous sur le site Internet à partir de 100 000 noms de domaine, révèle que les robots sont en arrière au sommet. En dehors de cela, mais les robots nuisibles ont l’avantage au-dessus des robots d’aide, qui étaient respectivement responsables de 29% et 23% de la plupart du trafic Web. «La statistique la plus alarmante dans cette déclaration est en outre la tendance la plus cohérente qu’elle observe», écrit Igal Zeifman, directeur de la publicité d’Imperva, dans un article sur l’analyse. «Au début, cinq ans, chaque visiteur du site Web tiers était un robot d’attaque.» Placé dans un autre sens: plus de 94% dans les 100 000 noms de domaine dans la déclaration connaissaient un minimum d’une invasion de bot sur les 90 jours ouvrables de la recherche d’Imperva. Les sites Web qui sont beaucoup moins appréciés par les êtres humains – analysés par le trafic – ont tendance à obtenir beaucoup plus de voyages des robots. «Simplement placé», a écrit Zeifman, «de bons robots exploreront votre site Internet et de terribles robots tenteront d’y pénétrer, indépendamment de leur popularité auprès des humains. Ils continueront même à accéder à un site en manque de trafic humain. » Bien que les robots soient intéressés par les sites même si les gens ne le seront pas, le processus de bot est susceptible de refléter les actions de l’homme en ligne. À titre d’illustration, le robot d’aide le plus productif sur Internet est probablement ce que l’on appelle un «récupérateur de flux», et c’est le type de robot qui aide à dynamiser le flux Facebook ou Twitter d’une personne sur l’application mobile du site pour téléphone mobile. Le récupérateur d’approvisionnement de Facebook, à lui seul, représentait 4,4% de tout le trafic du site, selon le bilan – ce qui est probablement beau, mais pas tout à fait étonnant. Fb est vraiment un monstre, et le trafic de son site Web de bot particulier le montre tout autant. Au total, les récupérateurs Nourish représentaient plus de 12% du trafic en ligne l’année dernière. Les robots d’exploration des moteurs de recherche Internet, les araignées professionnelles de suppression d’informations et les robots d’exploration de site sont probablement les autres robots d’exploration utiles que vous êtes susceptible de rencontrer sur le Web. (C’est certainement, si vous considérez que la collecte de vos détails individuels pour promouvoir des objectifs est utile.) Les robots d’exploration d’informations font leur travail de manière invisible, bien que d’autres robots soient plus faciles à localiser. En fait, les robots et d’autres personnes se rencontrent souvent. Les spambots arrivent dans les parties d’avis et les robots d’exploration de Tweets bloquent les délais des gens avec tout, du marketing, aux campagnes gouvernementales, à l’activisme sociétal, agence seo Lille en passant par les absurdités. Ces types de robots d’exploration ne sont généralement pas agréables, mais ils ne sont pas vraiment dangereux. Pour les vrais méchants, nous nous tournons vers les robots d’indexation utiles pour les attaques DDoS. Ils représentaient environ 24 pour cent du trafic total du site Web l’année dernière. Les délinquants les mieux notés dans cette classe comprenaient les virus Nitol, un robot connu sous le nom de Cyclone censé simuler les très bons robots de recherche de Google, et le logiciel malveillant Mirai, un virus qui a provoqué des interruptions massives du Web dans les États en octobre. D’autres robots terribles auxquels faire face incluent des grattoirs de données non autorisés, des spambots et des récupérateurs à la recherche de vulnérabilités de sécurité à utiliser. Ensemble, ils représentaient environ 5% du trafic Web. Et bien que le net soit déjà principalement constitué de robots, nous commençons tout juste à voir la conception de Bot Era. Conformément à CB Information, entreprise d’investigation du secteur, plus d’une douzaine de startups de bots soutenues par des fonds de capital-risque ont levé leur premier soutien il y a un an.