Les robots de rampe Net AI sont les cafards d’Web, croient de nombreux développeurs de logiciels. Certains développeurs ont commencé à riposter de manière ingénieuse, souvent humoristique.
Bien que tout website Net puisse être ciblé par un mauvais comportement de chenilles – parfois en prepare de retirer le website – Les développeurs open supply sont «de manière disproportionnée» impactée, écrit Niccolò Venerandi, développeur d’un bureau Linux connu sous le nom de Plasma et propriétaire du weblog Liberews.
De par leur nature, les websites hébergeant des projets gratuits et open supply (FOSS) partagent plus de leur infrastructure publiquement, et ils ont également tendance à avoir moins de ressources que les produits commerciaux.
Le problème est que de nombreux bots d’IA n’honorent pas le fichier Robotic.txt du protocole d’exclusion des robots, l’outil qui indique aux robots quoi ne pas ramper, créé à l’origine pour les robots de moteur de recherche.
Dans un «cri d’aide» article de weblog En janvier, le développeur FOSS XE IASO a décrit remark Amazonbot a perturbé sans relâche un website Net de serveur GIT au level de provoquer des pannes de DDOS. Les serveurs GIT hébergent des projets FOSS afin que quiconque souhaite puisse télécharger le code ou y contribuer.
Mais ce bot a ignoré le robotic.txt de l’IASO, s’est caché derrière d’autres adresses IP et a fait semblant d’être d’autres utilisateurs, a déclaré l’IASO.
« Il est useless de bloquer les robots de robottes AI parce qu’ils mentent, changent leur agent utilisateur, utilisent les adresses IP résidentielles comme proxys, et plus encore », a déploré IASO.
« Ils feront gratter votre website jusqu’à ce qu’il tombe, puis ils le gratteront un peu plus. Ils cliqueront sur chaque lien de chaque lien de chaque lien, affichant les mêmes pages encore et encore et encore.
Entrez le dieu des tombes
Alors Iaso a riposté avec intelligence, construisant un outil appelé Anubis.
Anubis est un chèque de preuve de travail proxy inversé Cela doit être adopté avant que les demandes ne soient autorisées à frapper un serveur GIT. Il bloque des bots mais laisse à travers les navigateurs opérés par des humains.
La partie drôle: Anubis est le nom d’un dieu dans la mythologie égyptienne qui mène les morts au jugement.
« Anubis a pesé votre âme (cœur) et si elle était plus lourde qu’une plume, votre cœur a été mangé et vous, comme, Mega est mort », a déclaré Iaso à TechCrunch. Si une demande Net transmet le défi et est déterminée à être humaine, Une jolie picture d’anime annonce le succès. Le dessin est «mon level de vue sur l’anthropomorphisage Anubis», explique IASO. S’il s’agit d’un bot, la demande est refusée.
Le projet ironiquement nommé s’est propagé comme le vent parmi la communauté FOSS. Iaso l’a partagé sur github Le 19 mars, et en quelques jours, il a collecté 2 000 étoiles, 20 contributeurs et 39 fourchettes.
Vengeance comme défense
La popularité instantanée d’Anubis montre que la douleur de l’IASO n’est pas distinctive. En fait, Venerandi a partagé l’histoire après l’histoire:
- PDG fondateur de Sourcehut Drew Devault décrit Les dépenses «de 20 à 100% de mon temps au cours d’une semaine donnée atténuent à l’échelle des robots hyper-agressifs de LLM» et «éprouvent des dizaines de brèves pannes par semaine».
- Jonathan Corbet, un célèbre développeur FOSS qui dirige le website de l’industrie de l’industrie LWN, a averti que son website était être ralenti par le trafic au niveau du DDOS « Des robots de gratte-parole AI. »
- Kevin Fenzi, le système système de l’énorme projet Linux Fedora, dit les robots de grattoir AI était devenu si agressif, il a dû bloquer tout le pays du Brésil de l’accès.
Venerandi dit à TechCrunch qu’il connaît plusieurs autres projets rencontrant les mêmes problèmes. L’un d’eux «a dû interdire temporairement toutes les adresses IP chinoises à un second donné».
Que cela s’enfonce un on the spot – que les développeurs «doivent même se tourner vers l’interdiction des pays entiers» juste pour repousser les robots d’IA qui ignorent les fichiers Robotic.txt, explique Venerandi.
Au-delà de peser l’âme d’un demandeur Net, d’autres développeurs croient que la vengeance est la meilleure défense.
Il y a quelques jours Actualités des piratesutilisateur xyzal Pages d’interdiction de chargement suggérées avec «une cost d’articles sur les avantages de la consommation d’eau de l’eau» ou des «articles sur l’effet positif de la seize de la rougeole sur les performances au lit».
« Pensez que nous devons viser les bots pour obtenir la valeur utilitaire _negative_ en visitant nos pièges, pas seulement à une valeur nulle », a expliqué Xyzal.
En l’prevalence, en janvier, un créateur anonyme connu sous le nom de «Aaron» a publié un outil appelé Népenthes Cela vise à faire exactement cela. Il emprisonne les robots dans un dédale de fake contenu sans fin, un objectif que le développement a admis ARS TECHNICA est agressif sinon malveillant. L’outil porte le nom d’une plante carnivore.
Et Cloudflare, peut-être le plus grand joueur industrial offrant plusieurs outils pour repousser les robots de l’IA, a publié la semaine dernière un outil similaire appelé AI Labyrinth.
Il est destiné à «ralentir, confondre et gaspiller les ressources des rampants d’IA et d’autres robots qui ne respectent pas les directives« sans crawl », décrit Cloudflare Dans son article de weblog. Cloudflare a déclaré qu’il nourrit mal les robots d’IA, «un contenu non pertinent plutôt que d’extraire les données de votre website Net légitimes».
Devault de Sourcehut a déclaré à TechCrunch que «Nepenthes avait un sentiment de justice satisfaisant, automotive il nourrit les bêtises aux robots et empoisonnes leurs puits, mais finalement Anubis est la answer qui a fonctionné» pour son website.
Mais Devault a également émis un plaidoyer public et sincère pour une answer plus directe: «Veuillez arrêter de légitimer les générateurs d’photos LLMS ou AI ou Github Copilot ou l’un de ces ordures. Je vous supplie de cesser de les utiliser, arrêtez d’en parler, arrêtez d’en faire de nouveaux, arrêtez-vous.»
Étant donné que la probabilité de cela est Zilch, les développeurs, en particulier dans FOSS, ripostent avec intelligence et touche d’humour.
