π0 de Physical Intelligence, première IA de politique générale, rend possible le pliage du linge

• Intelligence physique (π)π0 : notre première politique générale

• Nous vivons à l’ère de la révolution de l’IA. Si l’IA peut résoudre des problèmes « faciles » comme gagner aux échecs ou découvrir de nouveaux médicaments, les problèmes du monde physique, comme plier une chemise ou ranger une table, restent difficiles. Pour y remédier, il faut doter les systèmes d’IA d’une intelligence physique.

• Au cours des huit derniers mois, nous avons développé π0, un modèle de base robotique généraliste, première étape vers la création d’une IA permettant aux utilisateurs de demander à un robot d’exécuter les tâches souhaitées. π0 couvre les images, le texte et les actions, et acquiert une intelligence physique à travers l’expérience du robot.

• La promesse d’une politique robotique générale

• Aujourd’hui, les robots n’ont qu’une expertise étroite, et ils ne peuvent pas agir dans des environnements complexes. L’IA peut simplifier la programmation de nouveaux comportements en permettant aux robots d’apprendre et de suivre les consignes des utilisateurs. Cela nécessite beaucoup de données.

• Si l’on parvient à entraîner une politique robotique générale, on peut créer un modèle capable d’exécuter diverses compétences et de contrôler différents robots. Il peut ensuite être spécialisé sur de nouvelles tâches avec peu de données.

• Un mélange d’entraînement inter-implémentations

• π0 a été entraîné à l’aide d’un préentraînement vision-langage à l’échelle d’Internet, de jeux de données open source de manipulation robotique, et de jeux de données de tâches sophistiquées provenant de huit robots différents. Il peut accomplir diverses tâches, soit en zero-shot via des prompts, soit grâce au fine-tuning.

• Hériter d’une compréhension sémantique à l’échelle d’Internet

• π0 hérite des connaissances sémantiques et de la compréhension visuelle d’un modèle vision-langage (VLM) préentraîné à l’échelle d’Internet. Les VLM sont entraînés pour modéliser les textes et les images du Web.

• Post-entraînement pour une manipulation fine

• Les tâches complexes et délicates peuvent être spécialisées en affinant le modèle. Par exemple, plier du linge est une tâche extrêmement difficile.

• Évaluation et comparaison de π0

• π0 affiche de meilleures performances sur l’ensemble des tâches par rapport aux autres modèles de base robotiques. Il surpasse également π0-small.

• La suite

• L’objectif de Physical Intelligence est de développer un modèle de base capable de contrôler tous les robots. Les expériences menées jusqu’à présent montrent qu’il peut piloter divers robots et réaliser des tâches qui n’avaient auparavant jamais été accomplies avec succès. Cependant, la politique robotique générale n’en est encore qu’à ses débuts et nécessitera encore de nombreuses avancées.

[GN⁺]

Avis sur Hacker News

• Mention de la nécessité de robots domestiques pour la satisfaction humaine

  • L’objectif de la valeur économique est le bonheur et la satisfaction des humains
  • Lorsqu’on devient plus riche, on a tendance à externaliser les tâches ménagères
  • La participation des femmes au marché du travail a permis aux entreprises d’en tirer profit
  • Il est proposé que des robots domestiques puissent être mis à disposition de tout le monde
  • L’innovation technologique s’introduit dans les foyers et rend la vie plus pratique
  • On s’attend à ce que des robot-maids entraînent des changements sociaux

• Scepticisme quant à l’utilité pratique des robots

  • Il est avancé que les robots ne sont pas réellement pratiques sans supervision humaine
  • Scepticisme concernant la possibilité de robots domestiques généralistes

• Le problème des contraintes d’espace dans les villes européennes

  • Les contraintes d’espace des buanderies rendent l’usage de robots difficile
  • Les buanderies se trouvent dans de petits espaces
  • Il est difficile pour les robots d’accéder à la buanderie

• Le potentiel des robots comme outils d’automatisation de laboratoire

  • Avec une meilleure précision, ils seraient utiles comme outils d’automatisation de laboratoire
  • De nombreuses tâches de laboratoire suivent des procédures définies

• Le potentiel des robots cuisiniers

  • Des robots cuisiniers seraient plus utiles que des robots pour la lessive
  • Les robots cuisiniers auraient un impact majeur sur l’industrie alimentaire

• La simplicité des robots et la question du coût

  • Des robots simples auraient un coût plus faible
  • Cuisiner est nécessaire plus souvent que faire la lessive

• L’évolution de la lessive

  • Les jeunes générations font moins la lessive et le repassage
  • Le besoin de faire la lessive diminue

• La question de la vitesse des robots

  • Interrogation sur la raison pour laquelle les robots se déplacent lentement
  • Question de savoir si c’est dû à la sécurité ou si la vitesse accroît la difficulté