HN présente : Feels Like Paper, une technologie au toucher du papier

• Concept

  • « Feels Like Paper! » est une série de prototypes qui augmentent le papier physique grâce à l’IA.
  • L’objectif est d’injecter dans le papier et l’encre physiques les caractéristiques du monde numérique tout en préservant leurs propriétés matérielles.
  • Les trois prototypes cherchent à donner au papier le dynamisme, l’agentivité et la persistance de l’informatique, tout en conservant la flexibilité, la durabilité et le caractère tactile qu’offre le papier.

• Inspiration

  • Le projet s’inspire d’un manifeste intitulé « GODS » de Keichii Matsuda.
  • Il propose de déployer dans le monde, via la réalité augmentée, divers agents ou « dieux » afin de fournir une interface d’IA plus humaine.
  • Avec une approche polythéiste inspirée du shintoïsme japonais, il suggère la possibilité d’interagir avec l’IA via de nombreux petits assistants, plutôt qu’à travers une source unique de vérité.

• Design

  • Le projet ressemble à « Math Notes » d’Apple, à « Dynamicland » de Bret Victor et à « Inkbase: Programmable Ink » d’Ink & Switch.
  • Le fait d’augmenter le papier tout en conservant sa nature statique renforce davantage le rôle de gardien de l’IA.
  • Les interactions implicites sont privilégiées afin de garder l’expérience simple et directe.

• Prototype « Maths & Questions »

  • Il explore les interactions contextuelles à travers le papier, en intégrant les sorties de l’IA dans la perception de l’utilisateur de manière significative et apaisée.
  • Lorsque l’utilisateur écrit un point d’interrogation ou un signe égal, la position est détectée et une image est envoyée au LLM pour obtenir une réponse.
  • La réponse est augmentée sur le papier avec l’écriture manuscrite de l’utilisateur.

• Prototype « Mark & Comment »

  • Il explore des interactions incarnées avec un jumeau numérique à travers le ML et le papier.
  • Lorsque l’utilisateur surligne du texte, le surlignage est enregistré dans la version numérique.
  • Un commentaire vocal sur la partie surlignée est automatiquement enregistré.

• Prototype « Draw & Dream »

  • Il explore la co-création avec l’IA via la diffusion d’images.
  • Les dessins de l’utilisateur sont envoyés à StreamDiffusion afin d’appliquer une « lentille » stylistique.
  • Le flux vidéo résultant est diffusé en streaming vers une application Unity.

• Résultats et enseignements

  • Les prototypes montrent comment l’IA peut être amenée dans le monde physique.
  • Ils explorent la possibilité d’interfacer directement l’informatique avec des objets physiques.
  • Ils recadrent différemment la relation humaine à l’IA à travers trois approches distinctes.