Consommer le firehose de Bluesky pour moins de 2,50 $ par mois

 (bsky.bad-example.com)
2 points par GN⁺ 2024-11-17 | 1 commentaires | Partager sur WhatsApp

  • Utilisation des données d'atproto et de Bluesky

  • Toutes les données de Bluesky sont très publiques, et la plateforme compte actuellement 15 millions d'utilisateurs. Cela représente une grande quantité de données publiques.

  • Avec Jetstream, il est possible de se connecter à l'activité du réseau en temps réel via un flux JSON sur WebSocket. C'est très facile à démarrer et amusant à explorer.

  • Connexion au firehose

  • Il est possible de consommer le firehose gratuitement depuis le navigateur.

  • Une petite app

  • Une app a été esquissée pour écouter tous les événements de suppression du firehose et afficher anonymement, en dernier, le texte supprimé. Il est intéressant d'observer ce que les gens choisissent de supprimer.

  • Cette app fonctionne sur Fly :

    • machine Fly, shared-cpu-1x, 256 Mo de RAM : 1,94 $/mois
    • volume persistant de 2 Go : 0,30 $/mois

  • L'app fonctionne bien sur une petite instance.

  • Fonctionnement de l'app

  • Réception des événements de création de nouveaux posts dans la collection app.bsky.feed.post.

  • Filtrage des posts vides et application de corrections pour les mentions et les liens.

  • Mise en cache du contenu texte nettoyé sur le volume dans PebbleDB, avec did+rkey comme clé.

  • Suppression périodique des textes stockés depuis plus de 48 heures.

  • À chaque événement de post supprimé, récupération du texte depuis le cache puis diffusion aux observateurs actuels.

  • Des apps plus intéressantes ne se réduiront peut-être pas autant, mais certaines le peuvent.

À lire aussi

1 commentaires

 
GN⁺ 2024-11-17
Avis Hacker News
  • Parmi les avantages de Bluesky, on peut utiliser son nom d’utilisateur comme site web, et il est possible de copier-coller des images sur iOS
    • Il existe un starter pack pour les hackers Ruby, ainsi que diverses communautés
  • Le firehose de bsky rappelle avec nostalgie 2005 et c’est amusant
    • Quelqu’un s’en est servi pour réaliser un projet amusant
  • On a l’impression que l’environnement de développement libre de l’ancien Twitter est de retour
    • Quelqu’un a déjà développé un bot sur Twitter par le passé et remporté un concours avec
  • L’une des raisons pour lesquelles Bluesky est meilleur que X, c’est qu’il mérite d’être soutenu même en dehors des questions politiques
    • Quelqu’un se demande s’ils proposent différents dumps de données
  • Le souvenir d’avoir utilisé le firehose de l’ancien Twitter était réjouissant, et l’idée de voir ce genre d’initiatives renaître est enthousiasmante
  • L’accessibilité de Bluesky est impressionnante comparée aux nouvelles règles de l’API de Twitter
  • Il y a de la frustration envers Twitter, qui a cassé l’automatisation et voulu facturer 100 $ par mois
    • Aujourd’hui, c’est passé à 200 $, soit un niveau comparable à une mensualité de prêt auto
  • Il y a le sentiment que ces données pourraient être utilisées comme données d’entraînement pour l’IA/les LLM
  • La démo du firehose de mots est excellente, et il semble que des personnes créatives pourront s’en servir pour faire des choses formidables
  • Quelqu’un gère un compte important sur Twitter et cherche un moyen de publier automatiquement aussi sur Threads et Bluesky