Google a retiré l’intégralité de mon blog Bear de l’index, sans que je sache pourquoi
(journal.james-zhan.com)- Le blog personnel blog.james-zhan.com a été entièrement retiré de l’index de recherche Google un mois après sa création.
- Juste après avoir mal validé une URL de flux RSS dans Google Search Console (GSC), tous les articles sont passés à l’état “Crawled – currently not indexed”.
- De nombreuses causes possibles ont été vérifiées (configuration du domaine, qualité du contenu, structure des liens internes, etc.), mais aucune anomalie n’a été trouvée.
- Avec l’aide de Herman, le fondateur de Bear Blog, les problèmes DNS, HTML/CSS et plateforme ont également été exclus, et le blog est bien indexé par d’autres moteurs de recherche.
- En fin de compte, l’auteur a décidé de migrer le blog vers un nouveau sous-domaine et de laisser Google gérer l’indexation naturelle, la cause restant toujours floue.
Situation initiale
- Le blog a été créé le 4 octobre et a publié son premier article long de type chronique d’actualité.
- Après soumission du sitemap dans Google Search Console (GSC) et demande d’indexation, il a été affiché dans les résultats de recherche dès le lendemain.
- Ensuite, à chaque nouvelle publication, une demande d’indexation a été répétée et correctement prise en compte.
Problème survenu
- Le 14 octobre, après avoir reçu un message de GSC indiquant qu’une URL n’était pas indexée, l’auteur a cliqué sur le bouton “Validate”.
- Cette URL était le flux RSS (
feed/?type=rss), donc ce n’était pas une page réelle.
- Cette URL était le flux RSS (
- Le 20 octobre, après avoir reçu par e-mail un message de GSC « some changes failed », tous les articles ont été désindexés.
- Le message d’état affichait : “Page is not indexed: Crawled – currently not indexed”
- La resoumission du sitemap ainsi que les demandes d’indexation URL par URL n’ont eu aucun effet.
Recherche de la cause
- La date de démarrage de la vérification d’indexation est la même que celle où tous les articles ont cessé d’être indexés.
- Il n’est pas clair si la tentative de validation du flux RSS a déclenché le problème.
- Les articles publiés par la suite sont tous restés dans le même état d’erreur.
- Le 3 novembre, même le dernier article encore présent a été désindexé.
Vérification des causes possibles
- Problème de domaine :
james-zhan.com, utilisé via GoDaddy, est correctement indexé sur d’autres sous-domaines → ce n’est pas la cause. - Qualité du contenu : en le comparant à d’autres cas Bear Blog, il n’y a ni volume ni problème de qualité → ce n’est pas la cause.
- Manque de liens internes : la structure de base de Bear Blog est la même et d’autres blogs sont bien indexés → ce n’est pas la cause.
- Autres facteurs : selon les vérifications de Herman, fondateur de Bear Blog,
- DNS, HTML/CSS et paramètres de la plateforme sont normaux.
- Le code CSS personnalisé n’a pas d’impact sur l’indexation.
Autres moteurs de recherche et actions
- Sur DuckDuckGo, Bing, Brave, etc., le blog est bien indexé.
- Cela indique un problème du côté de Google plutôt qu’un défaut technique.
- Le blog a été migré vers un nouveau sous-domaine
- Migration du domaine de GoDaddy vers Porkbun
- Configuration d’un forwarding d’URL pour rediriger automatiquement les anciens liens vers le nouveau blog.
- Le nouveau blog n’a pas eu de sitemap soumis à GSC ; il a été laissé à l’indexation naturelle.
- La cause reste inconnue, et l’auteur remet en question l’opacité du système d’indexation Google.
1 commentaires
Avis sur Hacker News
Je ne peux rien contrôler sur AI Overview, mais après avoir ajouté
noindexà la page de recherche, le trafic s’est rétabli en une semaineJ’ai détaillé tout ça dans mon billet de blog
/searchait été mise en cache et exposée aux crawlers.Mieux vaut ne pas mettre les pages de recherche en cache et appliquer
noindexvia X-Robots-TagÀ l’avenir, il faudra sans doute suivre le trafic avec ses propres outils d’analyse
Désormais, les gens voient juste les résumés et les pubs, puis repartent
Est-ce qu’un autre site a mis un lien vers cette URL de recherche, ce qui l’a fait crawler ?
Si Google ajoutait des liens vers les sources dans les phrases du résumé, le taux de clic remonterait peut-être un peu
Quand un site est sanctionné, il est impossible d’en connaître la raison ou de faire appel.
Google joue de fait un rôle de gatekeeper.
Puisqu’il fonctionne comme un bien public, il faut un dispositif de support et de responsabilité à la hauteur.
La régulation n’est pas une solution miracle, mais pour une entreprise de ce niveau d’utilité, il devrait au moins exister une obligation minimale de garantie d’accès
Aujourd’hui, le système est tel qu’il faut payer de la publicité pour être visible dans les résultats
Résultat, le nombre de pages indexées est tombé de plusieurs milliers à une centaine
Voir la capture d’écran.
Même après six mois, ça ne s’est pas rétabli. Comme c’est un projet personnel, ce n’est pas trop grave, mais si ça avait été un business, j’aurais été furieux
Capture d’écran mise à jour
Après un certain temps d’activité, ils sont parfois reconnus comme bénéficiant d’un « droit acquis ».
J’ai même déjà vu des captures d’écran de Google Maps présentées comme preuves au tribunal
mais c’était en réalité une entreprise frauduleuse. Ils ont endommagé la serrure et exigé 600 dollars.
Après signalement, Google l’a supprimée rapidement, mais je pense qu’il faudrait une vérification d’identité réelle au moment de l’inscription
Le problème, c’est que la réalité finit parfois par changer pour se conformer à la carte
Dans les procédures administratives, on voit souvent passer des choses selon la logique du « s’il n’y a pas de contestation, c’est acceptable »
Mon site est faussement identifié comme contenu dupliqué et se retrouve désindexé.
Aucun problème sur Bing, mais Google est le seul à produire cette erreur
et pour des pages Reddit, seules des versions traduites dans une langue absurde sont affichées.
Le mécanisme de déduplication semble sans doute dysfonctionner
Si un reverse proxy est mis en place depuis un autre domaine, Google indexe les contenus comme des doublons.
Mieux vaut utiliser des balises canonical et des liens en chemin absolu
C’était un blog sans aucun problème depuis 17 ans
Comme il y a trop de spam, le nombre de faux positifs semble avoir augmenté
Cette méthode produit au contraire un effet pervers en réduisant la proportion de contenu légitime
Le point commun, c’est la structure dans laquelle Google décide qui survit
Une erreur RSS a peut-être simplement servi de déclencheur d’indifférence
alors Google Maps l’a-t-il vraiment rattrapé si vite ?
Il ne faut pas non plus sous-estimer l’influence d’Instagram ou de TikTok,
donc cela ressemble à une interprétation qui accorde trop de pouvoir à Google
Au final, on retombe sur le problème classique de l’œuf ou de la poule.
Les petits sites n’obtiennent pas de visibilité et ne peuvent pas grandir,
tandis que les grands continuent d’apparaître en haut sans difficulté