Anubis fonctionne

• Anubis est un logiciel utilisé par plusieurs grandes organisations, y compris l’ONU
• Ce logiciel est déployé par la Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, l’UNESCO, etc.
• Le déploiement d’Anubis montre l’importance et l’influence du logiciel
• Le développeur souhaite rendre l’installation d’Anubis plus simple et demande un soutien financier pour y parvenir
• Il prévoit de consacrer davantage d’efforts à Anubis afin de résoudre le problème de l’augmentation du trafic de bots sur Internet

---

Déploiement d’Anubis

• Anubis est utilisé par plusieurs grandes organisations, y compris l’ONU
• Il est déployé par la Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, l’UNESCO, Science Olympiad Student Center, Enlightenment et le GitLab de GNOME
• Ces déploiements montrent l’importance et l’influence d’Anubis

Réflexions et projets du développeur

• Il souhaite rendre l’installation d’Anubis plus simple
• Pour cela, il demande un soutien financier et accepte les dons via Patreon
• Il prévoit de consacrer davantage d’efforts à Anubis afin de résoudre le problème de l’augmentation du trafic de bots sur Internet
• Il pourrait aussi embaucher du personnel si nécessaire

Le problème du trafic Internet

• Il mentionne la possibilité que, sur des plateformes comme YouTube, le trafic des bots dépasse celui des humains
• Ce problème pourrait se produire à l’échelle de l’ensemble d’Internet
• Il estime nécessaire de consacrer davantage d’efforts à Anubis et à la stack technologique associée

Réflexions personnelles

• Le développeur décrit la situation actuelle comme « la conversation la plus surréaliste »
• Il exprime sa surprise face à l’évolution de sa vie
• Il prévoit de partager davantage d’informations sur Bluesky

[GN⁺]

Commentaire sur Hacker News

• C’est amusant de voir Xe transformer en produit réellement utile ce qui était historiquement considéré comme une blague ou une publication sans importance
• Il est surprenant que beaucoup de sites aient besoin de ce produit
  • Dans le cas de certains serveurs git, on comprend le problème des pages git lentes, car l’arborescence est profonde, il n’y a pas de cache et elles sont servies depuis des disques lents
• Dans le cas de l’Unesco, les sous-sites sont assez volumineux et contiennent des milliers de documents, mais ce sont des contenus statiques
  • Un Wordpress mal déployé tourne sur Apache, sans cache, sans compression du contenu, et sans HTTP 2/3
  • Cela pourrait être servi à bas coût sur une petite machine, mais cela demande une expertise spécialisée
• On peut demander à un LLM, mais ce n’est d’aucune aide quand on ne sait pas quoi lui demander
• C’est destiné à empêcher le scraping par l’IA
  • Anubis utilise des défis de preuve de travail pour garantir que le client utilise un navigateur moderne et peut calculer des sommes de contrôle SHA-256
• Je trouve le projet Anubis sympa
  • Mais c’est dommage que les visiteurs du site doivent activer Javascript™
  • Ce n’est pas adapté aux sites statiques
• Une solution efficace a été mise en place pour bloquer les « mauvais bots » au niveau réseau
  • En utilisant la base de données de MaxMind ainsi qu’un WAF et un reverse proxy personnalisés, plusieurs grands réseaux de « Big Tech / Big LLM » sont bloqués au niveau ASN (BGP)
• Je pense que le défi de preuve de travail devrait descendre au niveau du protocole
  • Il vaudrait mieux l’implémenter comme une partie de TCP pour des raisons d’accessibilité
• L’image de la page intermédiaire pendant l’attente de la vérification d’Anubis est mignonne
  • Je me demandais quel était l’impact sur les moteurs de recherche classiques et comment cela se compare à la solution anti-crawler IA de Cloudflare
  • Lors de l’installation et de l’utilisation d’Anubis, il est possible que certains moteurs de recherche n’indexent pas le site web
  • Les bots de scraping IA scrape(nt) de manière tellement agressive que cette approche a été choisie faute de mieux
  • Dans la plupart des cas, on peut se protéger avec Cloudflare, mais quand ce n’est pas possible, Anubis est une alternative
• La détection des bots prend 5 secondes à résoudre sur téléphone
• C’est efficace pour bloquer les utilisateurs qui ont désactivé JavaScript
• Cela a l’air bien, mais je me demande comment empêcher une entreprise d’IA de résoudre le défi, d’effectuer la preuve de travail, puis de scraper le site web