Pourquoi Amethyst ? La mission derrière les applications Shopify « anti-gonflement »

Introduction

Publier une page ne signifie pas que les moteurs de recherche l'indexeront.

C'est l'une des parties les plus frustrantes du SEO. Vous créez une page, l'ajoutez à votre site, la soumettez peut-être dans la Search Console, puis attendez. Les jours passent. Parfois des semaines. La page n'apparaît toujours pas dans Google.

Le problème est que l'indexation n'est pas une étape unique. Un moteur de recherche doit découvrir l'URL, l'explorer, la rendre, la comprendre, décider si elle vaut la peine d'être stockée, puis décider si elle doit apparaître dans les résultats de recherche.

Si l'une de ces étapes échoue, la page pourrait ne pas être indexée.

Ce guide explique les raisons les plus courantes pour lesquelles les pages ne sont pas indexées, comment diagnostiquer le problème et ce qu'il faut corriger en premier.

Que signifie réellement "non indexé" ?

Une page n'est pas indexée lorsqu'un moteur de recherche connaît l'URL mais ne l'a pas ajoutée à son index consultable, ou lorsqu'il n'a pas du tout découvert l'URL.

Il existe différentes situations qui sont souvent regroupées :

• Le moteur de recherche n'a pas trouvé l'URL.
• Le moteur de recherche a trouvé l'URL mais ne l'a pas explorée.
• Le moteur de recherche a exploré l'URL mais a choisi de ne pas l'indexer.
• La page a été indexée auparavant mais a été retirée ultérieurement.
• La page est bloquée, redirigée, canonisée ailleurs, ou marquée noindex.

Chaque situation nécessite une solution différente.

Exploration vs Indexation

L'exploration et l'indexation ne sont pas la même chose.

L'exploration signifie qu'un moteur de recherche visite une page et en extrait son contenu.

L'indexation signifie que le moteur de recherche décide de stocker cette page dans son index afin qu'elle puisse potentiellement apparaître dans les résultats de recherche.

Une page peut être explorée et ne pas être indexée. C'est courant.

Par exemple, Google peut explorer une page et décider que :

• Le contenu est trop léger.
• La page duplique une autre URL.
• La balise canonique pointe ailleurs.
• La page n'apporte pas suffisamment de valeur.
• La page est bloquée à l'indexation.

C'est pourquoi la soumission d'une URL n'est qu'une partie du processus. La page doit encore mériter d'être indexée.

Comment les moteurs de recherche découvrent les pages

Les moteurs de recherche peuvent découvrir des pages de plusieurs façons :

• Liens internes depuis d'autres pages de votre site
• Sitemaps XML
• Liens externes depuis d'autres sites web
• Soumission manuelle via la Search Console
• API et systèmes de notification
• Exploration de modèles d'URL connus

Si une page n'est liée nulle part, n'est pas répertoriée dans votre sitemap et n'est pas soumise, sa découverte peut prendre beaucoup plus de temps.

La découverte est le premier obstacle. La qualité et la préparation technique viennent après.

1. La page n'a jamais été découverte

Parfois, le problème est simple : le moteur de recherche ne sait pas que la page existe.

Cela arrive souvent avec :

• Les nouveaux sites web
• Les nouveaux articles de blog
• Les pages de destination non liées à partir de la navigation
• Les pages de produits enfouies dans un catalogue
• Les pages créées par JavaScript mais non incluses dans le sitemap
• Les pages orphelines sans liens internes

Comment y remédier :

• Ajoutez l'URL à votre sitemap XML.
• Liez la page depuis des pages existantes pertinentes.
• Soumettez l'URL via le flux de travail de découverte approprié.
• Assurez-vous que la page est incluse dans la structure de votre site.

Si une page est importante, ne la cachez pas.

2. La page est bloquée par robots.txt

robots.txt indique aux crawlers quelles parties de votre site ils ne doivent pas accéder.

Si votre page est bloquée par robots.txt, les moteurs de recherche pourraient ne pas pouvoir l'explorer correctement.

Exemple :

User-agent: *
Disallow: /blog/

Cela empêcherait les crawlers d'accéder aux pages à l'intérieur de /blog/.

Comment y remédier :

• Vérifiez https://votre_domaine.com/robots.txt.
• Assurez-vous que les sections importantes ne sont pas bloquées.
• Testez la page dans Google Search Console.
• Supprimez les règles de désautorisation accidentelles.

N'utilisez pas robots.txt pour gérer l'indexation, sauf si vous en comprenez les conséquences. Si une page est bloquée à l'exploration, les moteurs de recherche pourraient ne pas pouvoir voir les signaux d'indexation importants sur la page.

3. La page contient une balise noindex

Une directive noindex indique aux moteurs de recherche de ne pas indexer une page.

Elle peut apparaître sous forme de balise meta :

<meta name="robots" content="noindex">

Ou en tant qu'en-tête HTTP.

Ceci est utile pour les pages privées, dupliquées, légères ou de faible valeur. Mais c'est un grave problème si elle apparaît sur une page que vous souhaitez indexer.

Comment y remédier :

• Inspectez le code source de la page.
• Vérifiez les paramètres du plugin SEO.
• Vérifiez les paramètres de visibilité de la page CMS.
• Supprimez le noindex des pages qui devraient apparaître dans la recherche.

Une page avec noindex peut être découverte et explorée, mais elle ne devrait pas être indexée.

4. Les balises canoniques pointent ailleurs

Une balise canonique indique aux moteurs de recherche quelle URL est la version préférée d'une page.

Exemple :

<link rel="canonical" href="https://example.com/main-page">

Si votre page a une balise canonique pointant vers une autre URL, les moteurs de recherche peuvent indexer l'URL canonique à la place.

Ce n'est pas toujours faux. Les balises canoniques sont utiles pour les pages dupliquées ou similaires. Mais si chaque page pointe vers la page d'accueil, ou si des pages importantes pointent vers la mauvaise URL, l'indexation peut être interrompue.

Comment y remédier :

• Vérifiez la balise canonique sur la page.
• Assurez-vous qu'elle pointe vers la version correcte.
• Évitez les erreurs canoniques auto-référentielles accidentelles.
• Ne canonisez pas des pages uniques vers des pages non liées.

Si vous souhaitez qu'une page soit indexée, elle a généralement besoin d'une balise canonique auto-référentielle.

5. La page renvoie un code d'état d'erreur

Les moteurs de recherche doivent accéder à la page avec succès.

Si l'URL renvoie une erreur, l'indexation est peu probable.

Les problèmes d'état courants incluent :

• 404 non trouvé
• 410 disparu
• 500 erreur de serveur
• 503 indisponible
• Boucles de redirection
• Ressources bloquées

Comment y remédier :

• Vérifiez le code d'état HTTP.
• Réparez les routes cassées.
• Résolvez les erreurs de serveur.
• Évitez les chaînes de redirection.
• Assurez-vous que la destination finale renvoie 200.

Une page qui échoue techniquement aura du mal à être indexée, même si le contenu est bon.

6. Contenu mince ou de faible valeur

Parfois, la page est techniquement correcte, mais le contenu n'est pas assez solide.

Une page « mince » peut avoir :

• Très peu de contenu original
• Un texte générique
• Aucun but clair
• Aucune réponse utile
• Aucune valeur unique
• Des descriptions de fabricant dupliquées
• Des pages de catégorie vides

Les moteurs de recherche n'ont pas besoin d'indexer chaque page qu'ils trouvent. Si une page ajoute peu de valeur, elle peut être explorée mais non indexée.

Comment y remédier :

• Ajoutez des informations originales utiles.
• Répondez aux vraies questions des utilisateurs.
• Incluez des exemples pertinents.
• Améliorez les liens internes.
• Ajoutez des sections structurées.
• Supprimez ou fusionnez les pages faibles.

Soumettre une page « mince » plus souvent ne résoudra pas le problème. Améliorez la page en premier.

7. Contenu dupliqué

Le contenu dupliqué est une autre raison courante pour laquelle les pages ne sont pas indexées.

Si plusieurs URL contiennent presque le même contenu, les moteurs de recherche peuvent en choisir une et ignorer les autres.

Les exemples courants incluent :

• Variantes de produits
• Pages de collection filtrées
• Pages adaptées à l'impression
• Pages de localisation avec un texte presque identique
• Descriptions de fournisseurs copiées
• Paramètres d'URL créant des doublons

Comment y remédier :

• Utilisez correctement les balises canoniques.
• Consolidez les pages dupliquées.
• Ajoutez du contenu unique là où les pages doivent être autonomes.
• Bloquez ou n'indexez pas les pages de paramètres de faible valeur, le cas échéant.
• Améliorez la liaison interne vers la version préférée.

Les pages dupliquées ne sont pas toujours un problème de pénalité. Souvent, les moteurs de recherche choisissent simplement de ne pas indexer toutes les versions.

8. Mauvais maillage interne

Les liens internes aident les moteurs de recherche à découvrir les pages et à comprendre leur importance.

Si une page a très peu de liens internes qui y pointent, les moteurs de recherche peuvent la considérer comme moins importante.

C'est particulièrement courant avec :

• Les anciens articles de blog
• Les pages de destination
• Les nouvelles pages de services
• Les pages de produits profondes
• Les pages saisonnières
• Les pages créées en dehors de la navigation principale

Comment y remédier :

• Liez la page à partir de pages existantes pertinentes.
• Ajoutez des liens à partir de pages de catégorie ou de centres thématiques.
• Utilisez un texte d'ancrage descriptif.
• Incluez la page dans une navigation utile si cela est approprié.
• Liez à partir de pages déjà indexées et performantes.

Le maillage interne est l'un des moyens les plus simples d'améliorer la découverte.

9. Pages orphelines

Une page orpheline est une page sans liens internes qui y pointent.

Les moteurs de recherche peuvent toujours découvrir les pages orphelines via des sitemaps ou des liens externes, mais elles sont plus difficiles à comprendre et à prioriser.

Si une page est suffisamment importante pour être classée, elle devrait normalement être connectée au reste de votre site.

Comment y remédier :

• Recherchez les pages orphelines à l'aide d'un outil d'exploration ou d'audit de site.
• Ajoutez des liens internes depuis des pages pertinentes.
• Incluez les pages importantes dans votre sitemap.
• Regroupez le contenu connexe dans des centres thématiques.
• Supprimez les pages orphelines qui n'ont aucune utilité.

Une page sans liens internes envoie un signal faible quant à son importance.

10. Faible autorité du site

Les sites web nouveaux ou de faible autorité prennent souvent plus de temps à faire indexer leurs pages.

Les moteurs de recherche ont des ressources d'exploration limitées. Ils ont tendance à explorer plus souvent les sites fiables, actifs et faisant autorité.

Si votre site est nouveau, a peu de backlinks, une structure interne faible ou très peu d'historique de contenu, l'indexation peut être plus lente.

Comment améliorer cela :

• Publiez du contenu utile de manière cohérente.
• Créez des liens internes entre les pages connexes.
• Obtenez des liens externes pertinents.
• Gardez votre sitemap propre.
• Évitez de publier un grand nombre de pages faibles.

L'autorité ne concerne pas seulement les liens. Il s'agit aussi de confiance, d'utilité et de cohérence.

11. Problèmes de budget d'exploration

Le budget d'exploration est la quantité d'exploration qu'un moteur de recherche est prêt à consacrer à votre site.

Pour les petits sites, le budget d'exploration n'est généralement pas le problème principal. Mais pour les grands sites de commerce électronique, les répertoires, les éditeurs et les sites de SEO programmatique, cela peut être important.

Des problèmes de budget d'exploration peuvent survenir lorsque les moteurs de recherche perdent du temps sur :

• Les URL dupliquées
• Les pages de filtre
• Les pages de résultats de recherche
• Les paramètres d'URL infinis
• Les chaînes de redirection
• Les pages cassées
• Les pages « minces » (peu de contenu)

Comment y remédier :

• Nettoyez les modèles d'URL dupliquées.
• Améliorez les balises canoniques.
• Supprimez les URL de faible valeur des sitemaps.
• Réparez les chaînes de redirection.
• Bloquez ou n'indexez pas soigneusement les sections de faible valeur.
• Améliorez la vitesse du site et la fiabilité du serveur.

L'objectif est d'aider les robots d'exploration à passer plus de temps sur les pages qui comptent.

12. Problèmes de rendu JavaScript

Certaines pages dépendent fortement du JavaScript pour afficher leur contenu.

Les moteurs de recherche peuvent traiter le JavaScript, mais cela peut être plus lent ou plus complexe que l'exploration d'un HTML normal.

Si le contenu important, les liens, les titres ou les données structurées n'apparaissent qu'après l'exécution du JavaScript, la découverte et l'indexation peuvent être affectées.

Comment y remédier :

• Rendez le contenu important disponible en HTML rendu côté serveur lorsque cela est possible.
• Vérifiez l'HTML rendu.
• Testez avec l'inspection d'URL de la Search Console.
• Évitez de cacher les liens essentiels derrière des scripts.
• Assurez-vous que les données structurées sont présentes et valides.

Si les utilisateurs et les robots d'exploration ne peuvent pas voir le même contenu important, l'indexation peut devenir peu fiable.

13. Pages récemment publiées

Parfois, rien ne va pas. La page est juste nouvelle.

Les moteurs de recherche n'indexent pas toutes les pages instantanément. Même les pages solides peuvent prendre du temps à apparaître.

La vitesse d'indexation dépend de :

• L'autorité du site
• Les liens internes
• La fraîcheur du sitemap
• La fréquence d'exploration
• La qualité de la page
• La santé technique
• La demande du moteur de recherche

Comment gérer cela :

• Assurez-vous que la page est explorable.
• Ajoutez des liens internes.
• Incluez-la dans le sitemap.
• Soumettez-la via votre workflow normal.
• Surveillez-la au fil du temps.

Ne continuez pas à resoumettre toutes les quelques minutes. Corrigez d'abord les problèmes réels.

14. Pages 404 "soft"

Une erreur 404 "soft" se produit lorsqu'une page renvoie un code d'état 200 mais ressemble à une page vide ou manquante.

Par exemple :

• Une page produit sans produit
• Une page de catégorie sans articles
• Une page mince indiquant "contenu non trouvé"
• Une page modèle avec presque aucune information utile

Les moteurs de recherche peuvent traiter ces pages comme étant de faible valeur ou manquantes, même si le serveur indique qu'elles existent.

Comment y remédier :

• Ajoutez du contenu utile.
• Retournez un vrai 404 ou 410 pour les pages supprimées.
• Redirigez les utilisateurs vers un remplacement pertinent si approprié.
• Évitez d'indexer des modèles vides.

Une page doit fournir une réelle valeur, et pas seulement renvoyer un code d'état de succès.

15. Les moteurs de recherche ont simplement choisi de ne pas l'indexer

C'est la réponse que personne n'aime, mais elle est souvent vraie.

Les moteurs de recherche ne sont pas tenus d'indexer chaque page explorable.

Une page peut être techniquement valide et ne pas être incluse dans l'index si le moteur de recherche décide qu'elle n'est pas suffisamment utile.

Cela peut arriver lorsque :

• Le sujet est déjà mieux couvert ailleurs.
• La page apporte peu de valeur unique.
• Le site a de nombreuses pages similaires.
• Le contenu est générique.
• La page a de faibles liens internes.
• La qualité globale du site est faible.

Comment y remédier :

• Améliorez le contenu.
• Rendez la page plus utile que les résultats concurrents.
• Ajoutez des exemples, des données ou des conseils originaux.
• Renforcez les liens internes.
• Consolidez les pages similaires.
• Développez une autorité thématique autour du sujet.

L'indexation n'est pas seulement technique. Elle est aussi éditoriale.

Comment diagnostiquer les problèmes d'indexation

Un bon diagnostic d'indexation suit une séquence.

Commencez par la découverte :

• L'URL est-elle dans le sitemap ?
• Est-elle liée en interne ?
• A-t-elle été soumise ?
• La Search Console l'a-t-elle découverte ?

Vérifiez ensuite l'accès technique :

• Renvoie-t-elle 200 ?
• Est-elle bloquée par robots.txt ?
• Contient-elle noindex ?
• La balise canonique pointe-t-elle ailleurs ?
• Redirige-t-elle ?

Ensuite, vérifiez la qualité :

• Le contenu est-il utile ?
• Est-il unique ?
• Répond-il à un réel besoin de recherche ?
• Est-il meilleur que les pages concurrentes ?
• Dispose-t-il d'un soutien interne suffisant ?

Puis surveillez :

• A-t-elle été explorée ?
• A-t-elle été indexée ?
• Des impressions sont-elles apparues ?
• Des clics sont-ils apparus ?
• Les classements ont-ils changé après les corrections ?

Ce processus est plus utile que de simplement appuyer à nouveau sur "soumettre".

Une liste de contrôle d'indexation simple

Avant de soumettre une URL, vérifiez :

• La page renvoie 200.
• La page n'est pas bloquée par robots.txt.
• La page n'a pas de balise noindex.
• La balise canonique pointe vers elle-même.
• La page est incluse dans le sitemap.
• La page a des liens internes.
• Le titre et le H1 sont clairs.
• Le contenu est utile et original.
• Les données structurées sont valides le cas échéant.
• La page se charge correctement sur mobile.
• Le contenu important est visible dans le HTML rendu.
• La page n'est pas un duplicata.

Si plusieurs d'entre eux échouent, corrigez la page avant d'essayer de la faire indexer.

Comment IndexStream vous aide

IndexStream est conçu pour rendre l'indexation moins déroutante et plus facile à suivre.

Au lieu de traiter l'indexation comme une soumission unique, il vous offre un flux de travail :

• Soumettre des URL.
• Enregistrer ce qui a été soumis.
• Vérifier si les requêtes ont été acceptées.
• Auditer la préparation des pages.
• Générer des cartes de correction.
• Comparer avec les concurrents.
• Créer des briefs de contenu.
• Surveiller la Search Console et les données analytiques.
• Suivre les corrections au fil du temps.

L'objectif n'est pas de garantir l'indexation. Aucun outil responsable ne peut faire cela.

L'objectif est de vous aider à comprendre ce qui s'est passé, ce qui bloque la découverte et ce qu'il faut corriger ensuite.

Pour des lectures complémentaires, voir L'API d'indexation de Google expliquée, Qu'est-ce qu'IndexNow ? et Check-list SEO technique.

Réflexions finales

Si une page n'est pas indexée, ne supposez pas que la seule réponse est de la soumettre à nouveau.

Commencez par poser de meilleures questions :

• La page a-t-elle été découverte ?
• Peut-elle être explorée ?
• Est-elle autorisée à être indexée ?
• Le canonique est-il correct ?
• Le contenu est-il suffisamment utile ?
• Est-elle liée en interne ?
• Est-elle différente des autres pages ?

Les problèmes d'indexation sont souvent un mélange de découverte, de qualité technique, de qualité du contenu et de priorisation.

Les flux de travail SEO les plus efficaces ne se contentent pas de pousser plus d'URL. Ils vous aident à décider quelles pages valent la peine d'être soumises, ce qui doit être corrigé, et si les corrections ont réellement amélioré la visibilité.

Foire aux questions

Pourquoi ma page n'est-elle pas indexée ?

Votre page peut ne pas être indexée parce qu'elle n'a pas été découverte, est bloquée, contient un noindex, pointe vers une autre URL canonique, a un contenu léger, duplique une autre page ou ne répond pas aux seuils de qualité des moteurs de recherche.

Combien de temps prend l'indexation ?

L'indexation peut prendre des minutes, des jours ou des semaines. Le délai dépend du site, de la qualité de la page, de la demande d'exploration, des liens internes et des décisions des moteurs de recherche.

La soumission d'une URL garantit-elle l'indexation ?

Non. La soumission d'une URL peut aider à la découverte, mais les moteurs de recherche décident toujours de l'explorer et de l'indexer.

Une page peut-elle être explorée mais non indexée ?

Oui. Un moteur de recherche peut explorer une page et quand même décider de ne pas l'indexer.

robots.txt empêche-t-il l'indexation ?

robots.txt bloque l'exploration, pas directement l'indexation. Cependant, si une page ne peut pas être explorée, les moteurs de recherche peuvent ne pas être en mesure de voir les signaux d'indexation importants.

Qu'est-ce qu'une page orpheline ?

Une page orpheline est une page sans liens internes pointant vers elle. Les pages orphelines sont plus difficiles à découvrir et à comprendre pour les moteurs de recherche.

Comment savoir si Google a découvert ma page ?

Utilisez l'outil d'inspection d'URL de Google Search Console, les rapports de sitemap, les journaux de serveur ou un outil de flux de travail d'indexation pour vérifier si la page a été découverte ou explorée.