Google met à jour ses produits de recherche web et les fonctionnalités de Programmable Search Engine

• Google remanie Programmable Search Engine pour le simplifier en trois solutions selon les cas d’usage : recherche par site, recherche d’entreprise et recherche sur l’ensemble du web
• La recherche dédiée à un site est regroupée dans Programmable Search Element, avec la possibilité de définir gratuitement jusqu’à 50 domaines
• Les entreprises ayant besoin de fonctionnalités avancées peuvent utiliser Vertex AI Search pour bénéficier d’une recherche conversationnelle basée sur l’IA et de fonctionnalités de niveau entreprise
• Les partenaires ayant besoin d’une recherche sur l’ensemble du web peuvent utiliser une solution de recherche full web donnant accès à l’index complet de Google, sur demande séparée
• Toutes les transitions doivent être terminées avant le 1er janvier 2027 ; ce changement vise à offrir une expérience de recherche plus ciblée aux partenaires développeurs

---

L’évolution de Programmable Search Engine

• Programmable Search Engine aide divers partenaires, des établissements universitaires aux sites e-commerce, à proposer une fonction de recherche sur leur propre site
• Google prévoit désormais de fournir des solutions plus avancées adaptées à chaque cas d’usage afin de garantir une expérience de recherche de meilleure qualité pour les utilisateurs comme pour les partenaires
• Cette refonte vise à simplifier et moderniser le produit, en réorganisant sa structure pour permettre de choisir l’outil le plus adapté selon l’objectif recherché

Un parcours clair selon les besoins de recherche

• Recherche dédiée à un site : Programmable Search Element (« Search Element ») reste l’outil optimal pour créer une expérience de recherche centrée sur un contenu spécifique
  • Il est possible d’y définir jusqu’à 50 domaines, ce qui convient aux contenus destinés à un public ciblé
• Recherche de niveau entreprise : Google Vertex AI Search continue d’être proposé avec une recherche conversationnelle basée sur l’IA et des fonctionnalités de grounding de niveau entreprise
• Recherche sur l’ensemble du web : une solution de recherche full web est proposée aux partenaires qui doivent interroger l’index complet du web au-delà des domaines spécifiés
  • Les partenaires intéressés peuvent manifester leur intérêt et demander plus de détails via un formulaire Google

Plan de transition vers des outils plus puissants

• Google fixe la période de transition jusqu’au 1er janvier 2027 afin de permettre aux partenaires d’exploiter pleinement le potentiel des nouvelles solutions
• Pour les utilisateurs de Search Element qui effectuent des recherches sur 50 domaines ou moins, les fonctionnalités actuelles restent disponibles
• En cas de recherche sur plus de 50 domaines ou d’utilisation de l’option « Search the entire web », il faudra migrer vers la solution de recherche full web
  • La date limite de transition est fixée au 1er janvier 2027
• Les utilisateurs de Custom Search JSON API pourront migrer vers Vertex AI Search pour 50 domaines ou moins, ou vers la solution de recherche full web si une recherche sur l’ensemble du web est nécessaire

Modifications de configuration pour les nouveaux moteurs

• Tous les nouveaux moteurs créés après le 20 janvier 2026 devront obligatoirement utiliser la fonctionnalité « Sites to search »
• Les moteurs existants ne sont pas concernés et pourront continuer à utiliser l’option « Search the entire web » jusqu’au 1er janvier 2027
• Ce changement pose les bases d’un développement produit plus ciblé et d’une meilleure expérience de recherche

Orientation à venir

• Avec cette évolution, Google prévoit d’offrir aux partenaires développeurs une meilleure expérience de recherche et des outils plus adaptés
• L’équipe Programmable Search Engine affirme sa volonté de construire avec ses partenaires l’écosystème de recherche du futur

[GN⁺]

Réactions sur Hacker News

• Google a discrètement modifié la politique de Programmable Search (anciennement Custom Search)
  Désormais, les nouveaux moteurs de recherche ne peuvent interroger que 50 domaines au maximum, et la fonction historique de recherche sur l’ensemble du web sera arrêtée le 1er janvier 2027
  Si l’on a besoin d’une recherche sur tout le web, on est maintenant renvoyé vers un « formulaire d’intérêt » pour des solutions d’entreprise comme Vertex AI Search
  Aucun tarif n’est publié, et aucune réponse n’est garantie
  Cela ressemble de fait à la fin de l’ère des moteurs de recherche indés ou de niche
  Lien vers l’annonce : documentation d’assistance Google

  • DuckDuckGo utilise Microsoft Bing Custom Search, et cela semble être un système bien plus stable
    Pas d’inquiétude qu’il soit supprimé du jour au lendemain comme chez Google
    customsearch.ai
  • Si Google perd en appel ou si sa demande de Partial Stay est rejetée, alors, en vertu de la décision de justice, Google sera tenu de fournir la recherche sur tout le web à des « Qualified Competitors »
    Document lié : jugement du tribunal PDF
  • J’ai moi-même construit mon propre index web. J’indexe actuellement 34 millions de documents
    greppr.org
    Dépendre de l’infrastructure d’un tiers est risqué. Le Google Graveyard existe bel et bien
  • J’apprends seulement aujourd’hui que la fonction « search the entire web » existait
    C’est étonnant : en pratique, Google habillait simplement son propre moteur pour permettre à d’autres d’y coller de la pub et de le revendre
  • Je me demande quels moteurs de recherche de niche vont être touchés par ce changement

• Ce cas illustre bien le risque de dépendre d’une API propriétaire
  Comme avec les restrictions de l’API Twitter, c’est le schéma classique d’une plateforme qui referme progressivement son écosystème
  Parmi les alternatives :

  1. construire sa propre infrastructure avec des outils comme Meilisearch ou Typesense
  2. utiliser des services de contournement comme SerpAPI (même si Google engage des actions en justice)
  3. se tourner vers des moteurs de recherche spécialisés qui contrôlent directement leurs sources de données
     La leçon centrale, c’est qu’il faut posséder soi-même sa valeur clé
     Le message de Google est clair — « la recherche indépendante est terminée, payez des tarifs entreprise ou partez »

• Discussion liée : l’impact du jugement contre Google sur Kagi

  • Selon le billet de Kagi, Google devrait fournir les données de l’index web (métadonnées de crawl, scores de spam, etc.) à prix coûtant
    Or cette décision semble contredire ce jugement
    Google cherche peut-être à supprimer le mode d’intégration existant pour forcer Kagi, Ecosia et d’autres à acheter les données via un mode plus contraignant

• En Europe, Qwant et Ecosia coopèrent pour construire leur propre index de recherche
  projet EUSP

  • C’est une bonne tentative, mais elle arrive probablement trop tard pour avoir un impact limité
    L’objectif reste néanmoins d’atteindre 30 % des requêtes de recherche en France d’ici fin 2025
    détails du projet

• Ce changement va en pratique porter un coup dur aux moteurs de recherche white label basés sur Google, comme Startpage et Ecosia
  Il n’existe presque pas d’alternative en dehors de Bing, même si des entreprises IA comme Perplexity et Anthropic semblent avoir construit leur propre index

  • À noter que Mojeek propose sa propre API de recherche web, avec plus de 9 milliards de pages indexées
    API Mojeek

• Je travaillais sur un projet jouet appelé « Google Search in a TUI », et cette politique m’a fait changer complètement de direction
  Au départ, je voulais ajouter Brave Search comme option de backend, mais je vais désormais en faire le choix par défaut
  Ce changement a été l’élément décisif

• J’aimerais moi aussi essayer de créer un petit moteur de recherche expérimental, et je me demande si quelqu’un l’a déjà fait en pratique

  • J’ai commencé en 2021 et j’indexe maintenant 1,1 milliard de documents
    Cela tourne sur un seul serveur, mais passer à l’échelle et maintenir la qualité est la partie la plus difficile
    Jusqu’à quelques millions de documents, c’est facile, mais à l’échelle de plusieurs milliards, c’est un tout autre problème
    Journal de développement : Marginalia Devlog
    Moteur réel : Marginalia Search
    Je compresse actuellement l’index, donc les performances sont un peu dégradées
  • Il existe aussi YaCy, un moteur de recherche distribué
    Les utilisateurs explorent le web et partagent leurs index entre eux dans une architecture de type torrent
    Cela reste insuffisant comme véritable moteur de recherche, mais le concept est intéressant
  • Mais dès qu’on n’est pas Google, on se heurte facilement au blocage du crawling web

• On dit qu’il y a une explosion des crawlers IA en ce moment, donc on pourrait s’attendre à voir apparaître beaucoup de nouveaux datasets couvrant l’ensemble du web
  Je me demande pourquoi ces jeux de données ne peuvent pas être proposés via API — est-ce un problème de qualité, ou de fréquence de mise à jour ?
  Cela pourrait en pratique devenir une nouvelle opportunité business

  • Dire que « les crawlers IA mettent les serveurs à genoux » est exagéré
    Même avec du matériel des années 1990, on pouvait traiter des milliards de requêtes
    Il suffit de ne pas régénérer les pages à chaque fois et de ne les mettre à jour qu’en cas de changement

• Je me demande si des index concurrents comme Bing, Ecosia ou Qwant sont vraiment objectivement inférieurs, ou si c’est simplement l’effet d’inertie autour de Google
  Je me demande aussi si ce changement pourrait au contraire stimuler la concurrence

  • Bing a récemment fermé son API, et elle était de toute façon très coûteuse
    Il n’existe désormais presque plus de moyen d’obtenir des résultats de recherche de façon programmatique
  • L’avantage de Google Programmable Search, c’est que c’était gratuit et qu’on pouvait aussi le monétiser via AdSense
    Bing, à l’inverse, facture par requête
    Ecosia et Qwant utilisent Bing à moindre coût grâce à des accords de licence
  • Pour les recherches en anglais, d’autres index restent tout à fait exploitables, mais pour les langues minoritaires, Google est presque la seule option
    Il est difficile pour d’autres moteurs d’atteindre cette échelle
  • L’index de Bing est plus petit que celui de Google, et des sites comme Reddit ont signé des accords d’exclusivité de recherche avec Google, ce qui dégrade la qualité des résultats
  • En dehors de l’anglais, la qualité est souvent très mauvaise, et des milliards d’utilisateurs restent dépendants de Google