1 points par GN⁺ 2025-12-13 | 1 commentaires | Partager sur WhatsApp
  • Le blog personnel blog.james-zhan.com a été entièrement retiré de l’index de recherche Google un mois après sa création.
  • Juste après avoir mal validé une URL de flux RSS dans Google Search Console (GSC), tous les articles sont passés à l’état “Crawled – currently not indexed”.
  • De nombreuses causes possibles ont été vérifiées (configuration du domaine, qualité du contenu, structure des liens internes, etc.), mais aucune anomalie n’a été trouvée.
  • Avec l’aide de Herman, le fondateur de Bear Blog, les problèmes DNS, HTML/CSS et plateforme ont également été exclus, et le blog est bien indexé par d’autres moteurs de recherche.
  • En fin de compte, l’auteur a décidé de migrer le blog vers un nouveau sous-domaine et de laisser Google gérer l’indexation naturelle, la cause restant toujours floue.

Situation initiale

  • Le blog a été créé le 4 octobre et a publié son premier article long de type chronique d’actualité.
    • Après soumission du sitemap dans Google Search Console (GSC) et demande d’indexation, il a été affiché dans les résultats de recherche dès le lendemain.
    • Ensuite, à chaque nouvelle publication, une demande d’indexation a été répétée et correctement prise en compte.

Problème survenu

  • Le 14 octobre, après avoir reçu un message de GSC indiquant qu’une URL n’était pas indexée, l’auteur a cliqué sur le bouton “Validate”.
    • Cette URL était le flux RSS (feed/?type=rss), donc ce n’était pas une page réelle.
  • Le 20 octobre, après avoir reçu par e-mail un message de GSC « some changes failed », tous les articles ont été désindexés.
    • Le message d’état affichait : “Page is not indexed: Crawled – currently not indexed”
    • La resoumission du sitemap ainsi que les demandes d’indexation URL par URL n’ont eu aucun effet.

Recherche de la cause

  • La date de démarrage de la vérification d’indexation est la même que celle où tous les articles ont cessé d’être indexés.
    • Il n’est pas clair si la tentative de validation du flux RSS a déclenché le problème.
  • Les articles publiés par la suite sont tous restés dans le même état d’erreur.
    • Le 3 novembre, même le dernier article encore présent a été désindexé.

Vérification des causes possibles

  • Problème de domaine : james-zhan.com, utilisé via GoDaddy, est correctement indexé sur d’autres sous-domaines → ce n’est pas la cause.
  • Qualité du contenu : en le comparant à d’autres cas Bear Blog, il n’y a ni volume ni problème de qualité → ce n’est pas la cause.
  • Manque de liens internes : la structure de base de Bear Blog est la même et d’autres blogs sont bien indexés → ce n’est pas la cause.
  • Autres facteurs : selon les vérifications de Herman, fondateur de Bear Blog,
    • DNS, HTML/CSS et paramètres de la plateforme sont normaux.
    • Le code CSS personnalisé n’a pas d’impact sur l’indexation.

Autres moteurs de recherche et actions

  • Sur DuckDuckGo, Bing, Brave, etc., le blog est bien indexé.
    • Cela indique un problème du côté de Google plutôt qu’un défaut technique.
  • Le blog a été migré vers un nouveau sous-domaine
    • Migration du domaine de GoDaddy vers Porkbun
    • Configuration d’un forwarding d’URL pour rediriger automatiquement les anciens liens vers le nouveau blog.
  • Le nouveau blog n’a pas eu de sitemap soumis à GSC ; il a été laissé à l’indexation naturelle.
  • La cause reste inconnue, et l’auteur remet en question l’opacité du système d’indexation Google.

1 commentaires

 
GN⁺ 2025-12-13
Avis sur Hacker News
  • Le trafic de mon blog a chuté brutalement cette année. En retraçant la cause, j’ai trouvé deux facteurs
    1. AI Overview. La visibilité et le classement sont restés les mêmes, mais le taux de clic a plongé. Les utilisateurs lisent seulement le résumé et ne cliquent pas
    2. Un problème d’exposition au spam. Sur la page de recherche, la requête utilisateur s’affichait en h1, et Google l’a interprétée comme du contenu spam.
      Je ne peux rien contrôler sur AI Overview, mais après avoir ajouté noindex à la page de recherche, le trafic s’est rétabli en une semaine
      J’ai détaillé tout ça dans mon billet de blog
    • Le deuxième problème ressemble à une attaque de Negative SEO. Il semble que la page /search ait été mise en cache et exposée aux crawlers.
      Mieux vaut ne pas mettre les pages de recherche en cache et appliquer noindex via X-Robots-Tag
    • Vers septembre, il y a eu un changement dans la manière dont Google comptabilise les clics et les impressions. Apparemment, il est impossible de comparer avec les anciennes données.
      À l’avenir, il faudra sans doute suivre le trafic avec ses propres outils d’analyse
    • On a l’impression que Google prépare cette situation depuis longtemps.
      1. augmenter le nombre de sites SEO pour repousser le contenu utile vers le bas
      2. placer les publicités en haut pour le repousser encore plus
      3. introduire des résumés IA pour supprimer toute raison de cliquer
        Désormais, les gens voient juste les résumés et les pubs, puis repartent
    • Je me pose une question. Si quelqu’un cherche « crypto » sur mon blog, comment cette page de résultats peut-elle se retrouver indexée par Google ?
      Est-ce qu’un autre site a mis un lien vers cette URL de recherche, ce qui l’a fait crawler ?
    • AI Overview ne semble pas près de disparaître. Les utilisateurs ordinaires ne lisent que le résumé.
      Si Google ajoutait des liens vers les sources dans les phrases du résumé, le taux de clic remonterait peut-être un peu
  • Que ce cas soit réel ou non, le problème, c’est la structure opaque des sanctions chez Google
    Quand un site est sanctionné, il est impossible d’en connaître la raison ou de faire appel.
    Google joue de fait un rôle de gatekeeper.
    Puisqu’il fonctionne comme un bien public, il faut un dispositif de support et de responsabilité à la hauteur.
    La régulation n’est pas une solution miracle, mais pour une entreprise de ce niveau d’utilité, il devrait au moins exister une obligation minimale de garantie d’accès
    • C’est moins un problème de gatekeeper qu’un problème de monopole. Google possède à la fois l’indexeur et l’outil de recherche
    • Si Google avait un sens des responsabilités éthiques, il devrait desserrer la concurrence sur les enchères publicitaires pour que les sites légitimes apparaissent en première page.
      Aujourd’hui, le système est tel qu’il faut payer de la publicité pour être visible dans les résultats
  • Il y a six mois, sur recommandation d’Ahrefs, j’ai supprimé les caractères Unicode du chemin des URL et mis en place des redirections.
    Résultat, le nombre de pages indexées est tombé de plusieurs milliers à une centaine
    Voir la capture d’écran.
    Même après six mois, ça ne s’est pas rétabli. Comme c’est un projet personnel, ce n’est pas trop grave, mais si ça avait été un business, j’aurais été furieux
    Capture d’écran mise à jour
    • Google a sans doute réalloué ses ressources à l’IA, et après l’invalidation du cache, le classement des pages recrawlées a changé
    • Google a déjà collecté tout le contenu dont il a besoin. Désormais, les sites web sont devenus des concurrents pour l’entraînement de l’IA
    • La leçon est simple — si ça marche bien, n’y touchez pas
    • J’ai vécu la même chose. Des milliers de pages ont été désindexées, et j’ai fini par fermer mon business de contenu financé par la publicité
  • Google Maps contient beaucoup de publicités illégales. Des hébergements sans licence ou des magasins vendant de l’alcool y sont listés sans problème.
    Après un certain temps d’activité, ils sont parfois reconnus comme bénéficiant d’un « droit acquis ».
    J’ai même déjà vu des captures d’écran de Google Maps présentées comme preuves au tribunal
    • J’ai moi aussi subi ce genre de préjudice. J’ai cherché un serrurier à proximité sur Google Maps,
      mais c’était en réalité une entreprise frauduleuse. Ils ont endommagé la serrure et exigé 600 dollars.
      Après signalement, Google l’a supprimée rapidement, mais je pense qu’il faudrait une vérification d’identité réelle au moment de l’inscription
    • Ça me rappelle l’histoire des trap streets, ces fausses rues ajoutées autrefois par les cartographes.
      Le problème, c’est que la réalité finit parfois par changer pour se conformer à la carte
    • Je me demande si ce type de publicité est traité différemment des autres.
      Dans les procédures administratives, on voit souvent passer des choses selon la logique du « s’il n’y a pas de contestation, c’est acceptable »
    • C’est une sorte de citogenèse juridique (legal citogenesis) — quand une information erronée se fige dans des documents officiels
  • En ce moment, la qualité de la recherche Google chute fortement.
    Mon site est faussement identifié comme contenu dupliqué et se retrouve désindexé.
    Aucun problème sur Bing, mais Google est le seul à produire cette erreur
    • J’ai une impression similaire. Des modèles populaires de Hugging Face n’apparaissent pas dans les résultats,
      et pour des pages Reddit, seules des versions traduites dans une langue absurde sont affichées.
      Le mécanisme de déduplication semble sans doute dysfonctionner
    • Il faut peut-être vérifier si les requêtes SNI sont mal routées.
      Si un reverse proxy est mis en place depuis un autre domaine, Google indexe les contenus comme des doublons.
      Mieux vaut utiliser des balises canonical et des liens en chemin absolu
    • Amazon comme Google sont remplis de faux produits et de résultats spam
    • Bing fonctionne bien sur tous mes sites, mais Google échoue partout
    • Aujourd’hui, la recherche Google est presque inutilisable. Il est surprenant qu’ils aient laissé se dégrader ainsi leur compétence principale
  • J’ai eu exactement le même problème. J’utilise le thème Hugo Bear, et récemment il a été totalement désindexé par Bing.
    C’était un blog sans aucun problème depuis 17 ans
  • Il est possible qu’un échec de validation RSS ait déclenché un drapeau spam.
    Comme il y a trop de spam, le nombre de faux positifs semble avoir augmenté
    • Si une seule erreur RSS suffit à désindexer tout un site, c’est un problème grave.
      Cette méthode produit au contraire un effet pervers en réduisant la proportion de contenu légitime
  • Honnêtement, en voyant le titre « Google de-indexed my Bear Blog », j’ai cliqué en croyant qu’il s’agissait d’un blog sur les ours
    • Si vous trouvez un vrai blog sur les ours, vous pourriez voir des résultats inattendus
    • Moi non plus, je ne comprends toujours pas pourquoi il y a « Bear » dans le titre
    • En tant que quietfox, il est important de se protéger soi-même ^^
  • C’est similaire à ce précédent fil HN.
    Le point commun, c’est la structure dans laquelle Google décide qui survit
    • Il y a aussi cet article comme cas connexe.
      Une erreur RSS a peut-être simplement servi de déclencheur d’indifférence
    • Autrefois, TripAdvisor représentait 60 % du marché local des avis au Royaume-Uni,
      alors Google Maps l’a-t-il vraiment rattrapé si vite ?
      Il ne faut pas non plus sous-estimer l’influence d’Instagram ou de TikTok,
      donc cela ressemble à une interprétation qui accorde trop de pouvoir à Google
  • La recherche Google favorise les grands sites et pénalise les nouveaux venus.
    Au final, on retombe sur le problème classique de l’œuf ou de la poule.
    Les petits sites n’obtiennent pas de visibilité et ne peuvent pas grandir,
    tandis que les grands continuent d’apparaître en haut sans difficulté