10 façons d'obtenir Google pour indexer votre site (cela fonctionne réellement)

Si Google n'indexe pas votre site Web, vous êtes quasiment invisible. Vous ne vous présenterez à aucune requête de recherche et vous ne recevrez aucun trafic organique. Rien. Nada. Zéro.

Étant donné que vous êtes ici, je suppose que ce n’est pas une nouvelle pour vous. Allons droit au but.

Cet article vous apprend comment résoudre l'un de ces trois problèmes:

1. L’ensemble de votre site Web n’est pas indexé.
2. Certaines de vos pages sont indexées, mais d’autres ne le sont pas.
3. Les pages Web que vous venez de publier ne sont pas indexées assez rapidement.

Mais d’abord, assurons-nous d’être sur la même page et de bien comprendre ce malarkey d’indexation.

Google découvre de nouvelles pages Web par rampant le Web, puis ils ajoutent ces pages à leur indice. Ils le font en utilisant un araignée web appelé Googlebot.

Confus? Définissons quelques termes clés.

• Rampant: Le processus de suivi des hyperliens sur le Web pour découvrir de nouveaux contenus.
• Indexage: Processus de stockage de chaque page Web dans une vaste base de données.
• Web araignée: Un logiciel conçu pour réaliser les rampant processus à l'échelle.
• Googlebot: Google araignée web.

Voici une vidéo de Google qui explique le processus plus en détail:

Lorsque vous recherchez quelque chose dans Google, vous demandez à Google de renvoyer toutes les pages pertinentes à partir de leur index. Comme il y a souvent des millions de pages qui correspondent à la facture, l'algorithme de classement de Google fait de son mieux pour trier les pages de sorte que les résultats les meilleurs et les plus pertinents apparaissent en premier.

Le point critique que je fais ici est que indexage et classement sont deux choses différentes.

L'indexation se présente pour la course; le classement est gagnant.

Vous ne pouvez pas gagner sans vous présenter à la course en premier lieu.

Allez sur Google, puis recherchez site: yourwebsite.com

Ce nombre indique approximativement le nombre de pages indexées par Google.

Si vous voulez vérifier l’état d’indexation d’un objet spécifique URL, utilise le même site: yourwebsite.com/web-page-slug opérateur.

Aucun résultat n'apparaîtra si la page n'est pas indexée.

Il est à noter que si vous êtes un utilisateur de la console de recherche Google, vous pouvez utiliser le Couverture Faites un rapport pour obtenir un aperçu plus précis de l'état de l'index de votre site Web. Il suffit d'aller à:

Console de recherche Google> Index> Couverture

Regardez le nombre de pages valides (avec et sans avertissements).

Si le total de ces deux chiffres est différent de zéro, Google indexe au moins certaines des pages de votre site Web. Sinon, vous avez un grave problème car aucune de vos pages Web n'est indexée.

Vous pouvez également utiliser la console de recherche pour vérifier si une page spécifique est indexée. Pour ce faire, collez le URL dans le URL Outil d'inspection.

Si cette page est indexée, elle indiquera «URL est sur Google. « 

Si la page n’est pas indexée, vous verrez les mots “URL n'est pas sur Google. « 

Vous avez constaté que votre site Web ou votre page Web ne sont pas indexés dans Google? Essaye ça:

1. Accéder à la console de recherche Google
2. Accédez au URL outil d'inspection
3. Coller le URL vous souhaitez que Google indexe dans la barre de recherche.
4. Attendez que Google vérifie la URL
5. Cliquez sur le bouton « Demander l'indexation »

Ce processus est une bonne pratique lorsque vous publiez un nouveau message ou une nouvelle page. Vous dites effectivement à Google que vous avez ajouté quelque chose de nouveau à votre site et qu’ils doivent le consulter.

Cependant, la demande d'indexation ne résoudra probablement pas les problèmes sous-jacents empêchant Google d'indexer les anciennes pages. Si tel est le cas, suivez la liste de contrôle ci-dessous pour diagnostiquer et résoudre le problème.

Voici quelques liens rapides vers chaque tactique, au cas où vous en auriez déjà essayé:

1. Supprimer les blocs d'analyse dans votre fichier robots.txt
2. Supprimer les tags non autorisés
3. Inclure la page dans votre sitemap
4. Supprimer les tags canoniques non autorisés
5. Vérifiez que la page n'est pas orpheline
6. Correction des liens internes nofollow
7. Ajouter des liens internes «puissants»
8. Assurez-vous que la page est précieuse et unique
9. Supprimer les pages de faible qualité (pour optimiser le «budget d'analyse»)
10. Construire des backlinks de haute qualité

1) Supprimez les blocs d'analyse dans votre fichier robots.txt

Google n'indexe-t-il pas l'intégralité de son site Web? Cela pourrait être dû à un bloc d'analyse dans quelque chose appelé un fichier robots.txt.

Pour vérifier ce problème, allez à votredomaine.com/robots.txt.

Recherchez l'un de ces deux extraits de code:

Agent utilisateur: Googlebot
Interdit: / 

Agent utilisateur: *
Interdit: / 

Ces deux éléments indiquent à Googlebot qu’ils ne sont pas autorisés à explorer les pages de votre site. Pour résoudre le problème, supprimez-les. Ses cette simple.

Un bloc d’exploration dans robots.txt peut également être la cause si Google n’indexe pas une seule page Web. Pour vérifier si tel est le cas, collez le URL dans le URL outil d'inspection dans la console de recherche Google. Cliquez sur le bloc Couverture pour obtenir plus de détails, puis recherchez la rubrique «Analyse autorisée? Non: bloqué par le fichier robots.txt ”.

Cela indique que la page est bloquée dans le fichier robots.txt.

Si tel est le cas, vérifiez de nouveau dans votre fichier robots.txt si des règles «interdire» se rapportent à la page ou à la sous-section correspondante.

Supprimer si nécessaire.

2) Supprimer les tags non autorisés

Google n'indexera pas les pages si vous leur dites de ne pas le faire. Ceci est utile pour garder certaines pages Web privées. Il y a deux façons de le faire:

Méthode 1: balise meta

Pages avec l'une de ces balises méta dans leur Cette section ne sera pas indexée par Google:

Il s’agit d’une balise meta robots qui indique aux moteurs de recherche s’ils peuvent ou non indexer la page.

Pour rechercher toutes les pages avec une balise méta noindex sur votre site, exécutez une analyse avec Ahrefs ’Site Audit. Aller au Pages internes rapport. Recherchez les avertissements «Noindex page».

Cliquez sur pour voir toutes les pages affectées. Supprimez la balise méta noindex de toute page à laquelle elle n'appartient pas.

Méthode 2: X-Robots-Tag

Les robots respectent également le X-Robots-Tag HTTP en-tête de réponse. Vous pouvez implémenter cela en utilisant un langage de script côté serveur tel que PHPou dans votre fichier .htaccess, ou en modifiant la configuration de votre serveur.

le URL L'outil d'inspection de la console de recherche vous indique si Google est empêché d'analyser une page en raison de cet en-tête. Il suffit d'entrer votre URL, puis recherchez le “Indexation autorisée? No: « noindex » détecté dans l'en-tête http « X ‐ Robots ‐ Tag » ”

Si vous souhaitez rechercher ce problème sur votre site, lancez une analyse dans l’outil d’Audit de site d’Ahrefs, puis utilisez «Informations sur les robots dans HTTP « header » dans l’explorateur de données:

Demandez à votre développeur d'exclure les pages que vous souhaitez indexer du renvoi de cet en-tête.

Lecture recommandée: Utilisation de la balise X-Robots HTTP Spécifications d'en-tête dans SEO: Trucs et astuces

3) Inclure la page dans votre sitemap

Un sitemap indique à Google les pages de votre site qui sont importantes et celles qui ne le sont pas. Cela peut également donner des indications sur la fréquence à laquelle ils doivent être réexaminés.

Google devrait pouvoir trouver des pages sur votre site Web, qu’elles soient ou non dans votre sitemap, mais il est toujours bon de les inclure. Après tout, il ne sert à rien de rendre la vie de Google difficile.

Pour vérifier si une page se trouve dans votre sitemap, utilisez la commande URL outil d'inspection dans la console de recherche. Si vous voyez le « URL n'est pas sur Google « erreur et » Sitemap: N / A « , alors ce n'est pas dans votre sitemap ou indexé.

Vous n'utilisez pas la console de recherche? Dirigez-vous vers votre sitemap URL-d'habitude, votredomaine.com/sitemap.xml– et rechercher la page.

Ou, si vous souhaitez rechercher toutes les pages analysables et indexables qui ne figurent pas dans votre sitemap, exécutez une analyse dans Audit du site d’Ahrefs. Aller à Explorateur de données et appliquez ces filtres:

Ces pages doivent être dans votre sitemap, alors ajoutez-les. Une fois terminé, informez Google que vous avez mis à jour votre sitemap en envoyant une requête ping à cette commande URL:

http://www.google.com/ping?sitemap=http://votresiteweb.com/sitemap_url.xml

Remplacez cette dernière partie par votre sitemap URL. Vous devriez alors voir quelque chose comme ceci:

Cela devrait accélérer l’indexation de la page par Google.

4) Enlevez les étiquettes canoniques non autorisées

Une balise canonique indique à Google quelle est la version préférée d'une page. Cela ressemble à quelque chose comme ça:

La plupart des pages n’ont pas de balise canonique, ou ce que l’on appelle une balise canonique à auto-référencement. Cela indique à Google que la page elle-même est la version préférée et probablement la seule. En d'autres termes, vous souhaitez que cette page soit indexée.

Toutefois, si votre page comporte une balise canonique non autorisée, elle peut indiquer à Google une version préférée de cette page qui n’existe pas. Dans ce cas, votre page ne sera pas indexée.

Pour rechercher un contenu canonique, utilisez Google URL outil d'inspection. Vous verrez un avertissement «Autre page avec balise canonique» si le canonique pointe vers une autre page.

Si cela n’est pas nécessaire et que vous souhaitez indexer la page, supprimez la balise canonique.

Si vous souhaitez trouver un moyen rapide de rechercher des balises canoniques indésirables sur l’ensemble du site, exécutez une analyse dans l’outil d’Audit du site d’Ahrefs. Allez dans l'explorateur de données. Utilisez ces paramètres:

Cela recherche les pages de votre sitemap avec des balises canoniques non auto-référencées. Comme vous souhaitez certainement indexer les pages de votre sitemap, vous devez rechercher si ce filtre renvoie des résultats.

Il est fort probable que ces pages contiennent un canonique non autorisé ou ne devraient pas figurer dans votre sitemap.

5) Vérifiez que la page n’est pas orpheline

Les pages orphelines sont celles sans liens internes pointant vers elles.

Dans la mesure où Google découvre de nouveaux contenus en explorant le Web, ils ne peuvent pas découvrir les pages orphelines de ce processus. Les visiteurs du site Web ne pourront pas les trouver non plus.

Pour rechercher des pages orphelines, analysez votre site avec Ahrefs ’Site Audit. Ensuite, vérifiez la Liens entrants rapport d'erreurs «page orpheline (n'a pas de liens internes entrants)»:

Cela affiche toutes les pages indexables et présentes dans votre sitemap, mais ne contient aucun lien interne pointant vers elles.

Vous n'êtes pas sûr que toutes les pages que vous souhaitez indexer figurent dans votre sitemap? Essaye ça:

1. Téléchargez une liste complète des pages de votre site (via votre CMS)
2. Analysez votre site Web (à l'aide d'un outil tel que Ahrefs ’Site Audit)
3. Croisez les deux listes d'URL

Les URL non trouvées lors de l'analyse sont des pages orphelines.

Vous pouvez réparer les pages orphelines de deux manières:

1. Si la page est sans importance, supprimez-le et supprimez-le de votre sitemap.
2. Si la page est importante, intégrez-le dans la structure de liens internes de votre site Web.

6) Correction des liens internes nofollow

Les liens nofollow sont des liens avec une balise rel = “nofollow”. Ils empêchent le transfert de PageRank à la destination URL. Google n'analyse pas non plus les liens non suivis.

Voici ce que Google dit à ce sujet:

Essentiellement, L'utilisation de nofollow nous amène à supprimer les liens cibles de notre graphique global du Web. Toutefois, les pages cibles peuvent toujours apparaître dans notre index si d'autres sites les lient sans utiliser nofollow, ou si les URL sont envoyées à Google dans un sitemap.

En bref, vous devez vous assurer que tous les liens internes vers les pages indexables sont suivis.

Pour ce faire, utilisez l’outil d’Audit du site d’Ahrefs pour analyser votre site. Vérifier la Liens entrants rapport pour les pages indexables avec des erreurs «La page n'a pas de suivi des liens internes entrants uniquement»:

Supprimez la balise nofollow de ces liens internes, en supposant que vous souhaitiez que Google indexe la page. Si ce n'est pas le cas, supprimez la page ou non.

Lecture recommandée: Qu'est-ce qu'un lien Nofollow? Tout ce que vous devez savoir (pas de jargon!)

7) Ajouter des liens internes «puissants»

Google découvre de nouveaux contenus en explorant votre site Web. Si vous négligez de créer un lien interne vers la page en question, ils risquent de ne pas pouvoir la trouver.

Une solution simple à ce problème consiste à ajouter des liens internes à la page. Vous pouvez le faire à partir de toute autre page Web que Google peut analyser et indexer. Toutefois, si vous souhaitez que Google indexe la page le plus rapidement possible, il est judicieux de le faire à partir de l'une de vos pages les plus « puissantes ».

Pourquoi? Parce que Google est susceptible de redéfinir ces pages plus rapidement que les pages moins importantes.

Pour ce faire, rendez-vous sur Ahrefs ’Site Explorer, entrez votre domaine, puis visitez le Meilleur par des liens rapport.

Cela affiche toutes les pages de votre site Web triées par URL Évaluation (UR). En d’autres termes, il affiche d’abord les pages les plus fiables.

Parcourez cette liste et recherchez les pages pertinentes à partir desquelles ajouter des liens internes vers la page en question.

Par exemple, si nous cherchions à ajouter un lien interne à notre guide de publication pour les clients, notre guide de création de liens offrirait probablement un endroit approprié pour le faire. Et cette page se trouve être la 11ème page la plus importante de notre blog:

Google verra et suivra ce lien lors de la prochaine exploration de la page.

8) Assurez-vous que la page est précieuse et unique

Il est peu probable que Google indexe les pages de qualité médiocre car elles n’ont aucune valeur pour ses utilisateurs. Voici ce que John Mueller de Google a déclaré à propos de l'indexation en 2018:

We never index all known URLs, that's pretty normal. I'd focus on making the site awesome and inspiring, then things usually work out better.

— 🍌 John 🍌 (@JohnMu) January 3, 2018

Cela implique que si vous voulez que Google indexe votre site Web ou votre page Web, il doit être «génial et inspirant».

Si vous avez éliminé les problèmes techniques liés au manque d’indexation, c’est le manque de valeur qui pourrait en être la cause. C’est pourquoi il vaut la peine de revoir la page d’un œil neuf et de se poser la question suivante: cette page est-elle réellement utile? Un utilisateur trouverait-il de la valeur dans cette page s’il cliquait dessus à partir des résultats de la recherche?

Si la réponse à l'une de ces questions est négative, vous devez améliorer votre contenu.

Vous pouvez trouver davantage de pages potentiellement de qualité médiocre non indexées à l'aide de l'outil d'audit de site d'Ahrefs. URL Profiler. Pour ce faire, accédez à l’Explorateur de données de l’Audit du site d’Ahrefs et utilisez les paramètres suivants:

Cela renverra les pages « minces » indexables et n'entraînant actuellement aucun trafic organique. En d’autres termes, il ya une chance décente de ne pas les indexer.

Exportez le rapport, puis collez toutes les URL dans URL Profiler et exécuter une vérification d'indexation de Google.

Vérifiez toutes les pages non indexées pour les problèmes de qualité. Améliorez si nécessaire, puis demandez la réindexation dans la console de recherche Google.

Vous devez également chercher à résoudre les problèmes de contenu en double. Il est peu probable que Google indexe les pages en double ou quasi-dupliquées. Utilisez le La qualité du contenu signaler dans Audit du site pour vérifier ces problèmes.

9) Supprimer les pages de mauvaise qualité (pour optimiser le «budget d'analyse»)

Avoir trop de pages de qualité médiocre sur votre site Web ne sert qu'à gaspiller le budget d'exploration.

Voici ce que Google dit à ce sujet:

Gaspillage des ressources du serveur sur [low‐value‐add pages] va drainer l’activité d’exploration des pages qui ont réellement une valeur, ce qui peut retarder considérablement la découverte d’un contenu de qualité sur un site.

Pensez-y comme à un enseignant évaluant des essais, dont l'un est le vôtre. S'ils ont dix essais à noter, ils passeront rapidement au vôtre. S'ils en ont cent, cela leur prendra un peu plus de temps. S'ils en ont des milliers, leur charge de travail est trop lourde et ils risquent de ne jamais arriver à noter votre dissertation.

Google déclare que «budget d'analyse […] La plupart des éditeurs ne doivent pas s'inquiéter « , et que » si un site contient moins de quelques milliers d'URL, la plupart du temps, il sera analysé de manière efficace. « 

Néanmoins, supprimer des pages de qualité médiocre de votre site Web n'est jamais une mauvaise chose. Cela ne peut avoir qu'un effet positif sur le budget d'analyse.

Vous pouvez utiliser notre modèle d'audit de contenu pour rechercher les pages potentiellement inutiles et de qualité médiocre pouvant être supprimées.

10) Construire des backlinks de haute qualité

Les backlinks disent à Google qu'une page Web est importante. Après tout, si quelqu'un crée un lien vers celui-ci, il doit avoir une certaine valeur. Ce sont des pages que Google veut indexer.

Par souci de transparence, Google n'indexe pas que les pages Web avec des backlinks. Il y a beaucoup (des milliards) de pages indexées sans backlinks. Toutefois, dans la mesure où Google attache plus d'importance aux pages contenant des liens de haute qualité, il est probable qu'elles analysent et réanalysent de telles pages plus rapidement que celles ne le contenant pas. Cela conduit à une indexation plus rapide.

Nous avons beaucoup de ressources pour créer des backlinks de haute qualité sur le blog.

Jetez un oeil à quelques-uns des guides ci-dessous.

Indexation ≠ classement

Avoir votre site web ou votre page web indexés dans Google n'est pas assimiler à des classements ou du trafic.

Ce sont deux choses différentes.

L'indexation signifie que Google connaît votre site Web. Cela ne signifie pas qu'ils vont le classer pour des requêtes pertinentes et utiles.

C'est là que SEO intervient – l'art d'optimiser vos pages Web pour classer des requêtes spécifiques.

En bref, SEO implique:

• Trouver ce que vos clients recherchent;
• Créer du contenu autour de ces sujets;
• Optimiser ces pages pour vos mots clés cibles;
• Construire des backlinks;
• Republier régulièrement le contenu pour le garder à «feuilles persistantes».

Voici une vidéo pour vous aider à démarrer SEO:

… Et quelques articles:

Dernières pensées

Il n'y a que deux raisons possibles pour lesquelles Google n'indexe pas votre site Web ou votre page Web:

1. Des problèmes techniques les en empêchent
2. Ils voient votre site ou votre page comme étant de basse qualité et sans valeur pour leurs utilisateurs.

Il est tout à fait possible que ces deux problèmes existent. Cependant, je dirais que les problèmes techniques sont beaucoup plus fréquents. Des problèmes techniques peuvent également conduire à la génération automatique de contenu indexable de faible qualité (par exemple, des problèmes de navigation à facettes). Ce n’est pas bon.

Néanmoins, parcourir la liste de contrôle ci-dessus devrait résoudre le problème de l'indexation neuf fois sur dix.

Rappelez-vous simplement que l'indexation classement. SEO est toujours indispensable si vous souhaitez classer vos requêtes de recherche et attirer un flux constant de trafic organique.