Microsoft introduit le mode Copilot dans Edge

• Le mode Copilot, une fonctionnalité IA expérimentale de Edge, a été introduit pour aller au-delà d'une simple navigation par onglets et aider activement l'expérience web des utilisateurs en transformant leurs flux de travail.
• En mode Copilot, le chat, la recherche et la navigation sont intégrés dans une seule zone de saisie, et le mode prend en charge la comparaison, la décision et la synthèse d'informations en reconnaissant le contexte global de plusieurs onglets.
• La navigation en langage naturel via commandes vocales, les Actions en temps réel et un panneau d’assistance dynamique permettent une exploration efficace sans clic ni saisie.
• En s’appuyant sur le renforcement de la confidentialité et de la sécurité, ainsi que sur la possibilité pour l’utilisateur de désactiver la fonction à tout moment, la gestion du traitement et de l’accès aux données du navigateur est clairement encadrée.
• Gratuit et entièrement optionnel (Opt-in), il est proposé pour une durée limitée sur Edge pour Windows/Mac, avec une évolution continue basée sur les retours.

---

Qu'est-ce que le mode Copilot ?

• Un nouveau mode de navigateur dans lequel l'IA ne se contente plus d'une navigation linéaire par onglets : elle comprend l'intention et le contexte de l'utilisateur pour proposer et assister de manière proactive.
• Lors de l'ouverture d'un nouvel onglet, une interface simple est proposée avec une zone de saisie unique intégrant chat, recherche et navigation.
• Copilot comprend la situation globale des différents onglets ouverts par l'utilisateur et accompagne de manière proactive des processus d'exploration complexes tels que la comparaison, la décision et la synthèse d'informations.

Principales fonctionnalités

• Navigation contextuelle basée sur le contexte multi-onglets

  • Il reconnaît le contexte de tous les onglets ouverts, par exemple en trouvant rapidement le logement le plus proche de la plage lors d'une comparaison de destinations, afin de minimiser les changements d'onglet et les actions manuelles.

• Commandes en langage naturel et Action

  • Prise en charge des commandes vocales : il est possible de demander en langage naturel des phrases comme « Trouve les informations sur cette page » ou « Ouvre un onglet pour comparer les options de produits ».
  • Dans le futur, Copilot automatisera des tâches complexes comme réservation, achat et collecte d'informations, en connectant de manière sélective l'historique, ainsi que les informations d'authentification.

• Panneau d'assistance dynamique et résumé d'informations

  • Appelez Copilot sous forme de panneau au moment voulu, sans changer de page, pour éliminer les sources de distraction et fournir instantanément les informations essentielles via la conversion de recettes, la traduction, la suppression de pop-ups et le résumé de textes longs, entre autres.

• Poursuite du travail et du parcours de navigation

  • À l'avenir, Copilot regroupera l'historique de navigation, passé jusqu'à présent, en parcours thématiques ou par projet, et supportera les actions de suivi, l'apprentissage et les recommandations personnalisées.
  • Les utilisateurs peuvent clairement identifier et contrôler le moment et l'étendue d'accès aux données de Copilot.

Confidentialité et contrôle de l'utilisateur

• Sur la base des standards de confidentialité et de sécurité fiables de Microsoft, l'utilisateur peut configurer et contrôler directement la collecte et l'utilisation des données.
• Le mode Copilot peut être activé/désactivé à tout moment dans les paramètres Edge ; si vous ne l'utilisez pas, vous gardez l'environnement Edge classique.
• Copilot affiche toujours une notification visuelle claire quand il accède et analyse les données du navigateur.

Déploiement expérimental et retours

• Le mode Copilot est proposé en gratuit, en période limitée et selon un mode Opt-in, et il évoluera de manière continue à partir des retours des utilisateurs.
• Vous pouvez proposer des idées et participer aux discussions sur des communautés comme Discord.

Comment démarrer

• Essayez directement sur aka.ms/copilot-mode pour tester la nouvelle expérience de navigation IA et partager vos commentaires.

[GN⁺]

Avis Hacker News

• Il est devenu difficile de comprendre la stratégie récente de Microsoft autour de Copilot. Il existe déjà des dizaines de fonctions similaires, avec des tarifs tous différents, mais au final rien ne fonctionne vraiment correctement. Le vrai point de monétisation serait quelque chose comme « dans Excel, demander en langage naturel un résumé ou une analyse complexe, avec création automatique d’une nouvelle feuille et de graphiques » pour les tâches quotidiennes, mais aujourd’hui Copilot se contente d’expliquer les étapes. Excel et Office ont déjà des API, donc il suffirait de créer une IA qui relie des commandes en langage naturel à de vraies opérations Excel pour que toutes les entreprises l’utilisent. J’ai tellement besoin d’un tel outil que j’ai essayé plusieurs IA, mais aucune ne fait réellement ce que je veux. Cela semble être un problème plus difficile qu’il n’y paraît, mais Microsoft n’arrive toujours pas à le résoudre malgré des milliards de dollars investis. La logique métier des entreprises est au cœur du sujet, et il est décevant de voir qu’ils n’arrivent pas à l’étendre correctement avec de nouvelles idées

  • Vu les sommes énormes injectées dans l’IA, Microsoft et d’autres poussent de force des produits IA encore inachevés. Il faut d’abord publier quelque chose, puis collecter des données utilisateur via des services immatures, en espérant s’en servir plus tard pour construire une meilleure IA. En parallèle, ils cherchent aussi à habituer les utilisateurs à se tourner d’abord vers l’IA, presque inconsciemment

  • Je me suis abonné à ChatGPT Pro et j’ai réellement demandé un résumé Excel. Il s’est mis au travail avec énormément d’enthousiasme, puis le résultat a été un fichier au format désastreux, avec une partie des données coupée — vraiment décevant

  • Récemment, lors d’une formation en entreprise qui montrait comment utiliser Copilot, j’ai vu l’import d’un fichier d’en-têtes CSV échouer et tout le monde patauger pendant 15 minutes. J’en ai retenu que l’intégration IA-Excel n’est pas encore à un niveau suffisamment fiable pour être vendue sérieusement

  • J’ai eu la même réflexion : ce que Microsoft devrait vraiment faire, c’est une fonction très simple de « enregistrement de script par IA ». Par exemple, si l’on pouvait enregistrer une seule fois avec l’IA un flux de travail répétitif comme téléchargement de CSV → traitement des données → ajout d’une nouvelle feuille → validation → envoi dans le système, puis l’automatiser ensuite, même des personnes qui ne maîtrisent ni le code, ni Excel, ni VBA verraient leur efficacité exploser. La majorité des services d’une entreprise ont énormément de tâches répétitives sur des données

  • « L’IA devrait s’intégrer naturellement au flux d’utilisation de l’OS, et améliorer l’expérience réelle des utilisateurs avec une meilleure recherche, l’OCR, la reconnaissance d’écriture, etc. Le point clé, ce n’est pas de coller de force une fenêtre de chat partout, mais le naturel. Il y a de moins en moins de raisons d’utiliser Edge. Le problème, c’est qu’on sent aussi la volonté de mettre de l’IA dans tous les outils développeur : VS, VSCode, PowerShell, Windows Terminal, Aspire, Azure… On voit bien que chaque équipe peine à remplir ses objectifs autour de l’IA »

• Les mouvements récents de Microsoft donnent l’impression qu’ils poussent davantage vers l’inconfort de l’utilisateur que vers sa prise en compte. Entre Edge imposé, dark patterns, réinitialisation de la télémétrie, polémique autour de Recall et autres, il y a de nombreux exemples qui accentuent la fatigue des utilisateurs. Mon hypothèse est qu’ils envient les revenus navigateur de Google et qu’ils partent du principe que « puisque nous contrôlons l’OS, nous devrions en tirer davantage de revenus ». Cette recherche de profit à court terme consume une confiance bâtie sur des décennies. Ils feraient mieux de faire de Windows un modèle en matière de protection de la vie privée, ou de développer un vrai écosystème d’apps natives comme macOS afin de gagner en fidélité sur le long terme

  • Microsoft a une posture qui consiste à penser qu’ils peuvent gagner énormément d’argent, même aux dépens des utilisateurs, et qu’ils n’ont pas grand-chose à craindre puisque les utilisateurs de Windows ont peu d’alternatives. En pratique, ceux qui voulaient aller chez Apple l’ont déjà fait, Linux progresse un peu, mais ils ne semblent même pas en avoir peur. Une entreprise en situation de monopole n’a pas vraiment besoin de se soucier de la fidélité ou de créer de la valeur

  • Certains produits Microsoft laissaient entrevoir un énorme potentiel, mais l’ambiance côté direction semble de plus en plus être de presser toute la valeur possible des utilisateurs. Il vaudrait mieux simplement faire des produits solides sur les fondamentaux, avec une UI cohérente partout et sans imposer publicité ni résultats sponsorisés. J’étais autrefois fan d’Edge, mais l’ajout de fonctions inutiles comme les coupons m’a déçu. VS Code est excellent, mais le support .Net, ARM, RDP, Copilot et d’autres aspects deviennent de plus en plus décevants. Même face à l’open source ou à des services alternatifs, on constate souvent l’absence de « la fonctionnalité dont on a le plus besoin ». Désormais, pour un nouveau projet, j’ai plutôt envie d’utiliser PostgreSQL à la place de MS-SQL. J’évite aussi de développer des solutions basées sur Windows Server, et même concernant VS Code, je commence à beaucoup hésiter

  • Les revenus de Google viennent majoritairement de la publicité, et le fait que Chrome et YouTube soient gratuits est particulier. Microsoft, historiquement, est centré sur le payant (Windows, Office, etc.)

• Il existe un article de Bloomberg analysant Microsoft Copilot (lien fourni) ainsi qu’une discussion HN associée. « En résumé, personne n’a envie d’utiliser Copilot, parce que la qualité est mauvaise »

  • Un article dit que « les employés préfèrent ChatGPT à Copilot », ce qui m’a fait me demander si Copilot n’utilisait pas GPT. En cherchant, il semble bien s’appuyer directement sur GPT-4, mais le problème pourrait venir de la surcouche (wrapper) ajoutée par Microsoft

• Quand Edge est sorti au départ, je l’aimais bien et je l’ai utilisé quelque temps comme navigateur par défaut. Mais les fonctionnalités inutiles comme les offres de coupons se sont multipliées, au point qu’il fallait tout désactiver à la main dans les réglages, et j’ai fini par revenir à Brave. La synchronisation entre navigateurs est une bonne chose, mais la publicité marketing et la promotion commerciale me rebutent complètement. Dès que j’ai vu des pubs apparaître dans la recherche, je suis passé sous Linux. Selon des statistiques du gouvernement américain, la part de marché des desktops Linux serait récemment montée jusqu’à 6 %, et Valve/Steam a aussi beaucoup amélioré la compatibilité des jeux. Microsoft a eu de nombreuses bonnes opportunités avec ses outils et services pour développeurs (.Net, VS Code), mais il est regrettable de voir à quel point la recherche de revenus est devenue insistante auprès du grand public. Aujourd’hui, les logiciels commerciaux devraient impérativement réfléchir au packaging pour Linux, notamment AppImage/Flatpak, et il y a aussi beaucoup d’opportunités sur le marché des alternatives à Adobe

  • Je suis passé à Vivaldi

• En mentionnant le fait que Copilot comprend le contexte de tous les onglets ouverts, certains s’inquiètent que si beaucoup d’onglets ouverts sont des blogs SEO spam de mauvaise qualité, cela contamine le contexte de l’IA. À l’avenir, si les producteurs de contenu inondent le web d’informations fausses mais sophistiquées, l’IA risque de les citer sans discernement. Quand j’évalue directement une information, la fiabilité de la source est essentielle pour moi, or l’IA gère encore mal cet aspect. Comme il s’agit d’une IA soupçonnée d’avoir massivement pillé des données, on suppose qu’attribuer correctement les sources lui est structurellement difficile

  • Google dispose déjà d’un score de page pour chaque site, donc combiner ce type d’information avec une IA (LLM) est tout à fait possible techniquement. Dire que c’est une limite inhérente à l’IA est une vision à courte vue. En prenant comme exemples les progrès de l’IA sur la représentation des doigts ou le code, on souligne que la technologie continue d’évoluer

• Copilot déduit certains goûts d’un utilisateur précis (par exemple, Dylan aime le football) et, au lancement du navigateur, recommande des billets. Cela donne l’impression qu’au lieu d’aider fondamentalement l’utilisateur dans son activité, on force l’ajout de fonctions IA. On souligne aussi que cela apparaît en permanence, même sans prompt explicite

• On a l’impression qu’à l’ère de l’IA, la gestion de produit (Product Management) de base a disparu. Qui a réellement demandé ce type de fonction d’automatisation du navigateur ? Où est le product-market fit ?

  • Au fond, c’est un spyware IA côté client, un outil qui surveille l’activité sur Internet ou sur le réseau interne. Quand on considère que les vrais clients de Microsoft sont les entreprises et les administrations, cette stratégie devient compréhensible

• Malgré beaucoup d’avis négatifs, je vois plutôt cela positivement. Il existe bien quelques plugins sur Safari et Firefox, mais en tant qu’utilisateur, il me manquait une intégration profonde capable de comprendre le contexte unifié entre plusieurs onglets. Quand on fait de la recherche avec plus de 15 onglets ouverts, pouvoir interroger un LLM sur la base de ce contexte global est séduisant. La seule raison pour laquelle je ne l’ai pas encore installé, c’est qu’il y a des rumeurs selon lesquelles OpenAI prépare aussi une fonction similaire. J’espère que des fonctions comparables arriveront bientôt

• L’automatisation de l’extraction et de la manipulation de données sur des sites sans API est un défi extrêmement difficile. Dans la plupart des travaux d’analyse de données, ce type de projet interne est indispensable. Quand des sites ne fournissent pas officiellement leurs services ou manquent de moyens techniques pour proposer une API, les gens se retrouvent à cliquer et télécharger manuellement de manière répétitive. Jusqu’ici, les solutions RPA (Robotic Process Automation) restaient l’alternative la plus crédible. Sans mauvaise intention, leur effet principal est plutôt de libérer les humains du travail répétitif

  • Quand des organisations aux ressources limitées, comme des organismes publics, ne peuvent pas créer elles-mêmes une API, on peut imaginer qu’un acteur externe propose de la développer pour elles, ce qui serait bénéfique à tout le monde. Je ne sais pas si ce type de collaboration existe vraiment sur le terrain, mais si cela est refusé dans la réalité, on peut supposer que le problème vient parfois de la volonté même des acteurs en place (gatekeeping)

• Je pense que l’innovation viendra du fait de remplacer l’OS par une interface de style IA. Pour l’instant, tout le monde reste bloqué à des répétitions au niveau du navigateur, mais le vrai objectif est de changer fondamentalement la manière dont l’utilisateur interagit avec la technologie. En pratique, si « tout ce dont on a besoin, c’est ChatGPT », alors la tentative vraiment importante consiste à implémenter tout l’OS sous forme d’interface conversationnelle