L’exploration et l’indexation des sites Web constituent la première étape d’un processus complexe de compréhension de ce que sont les pages Web afin de les présenter comme des réponses aux requêtes des utilisateurs.

Les moteurs de recherche améliorent constamment la façon dont ils explorent et indexent les sites Web.

Comprendre comment Google et Bing abordent la tâche d’exploration et d’indexation des sites Web est utile pour développer des stratégies visant à améliorer la visibilité de la recherche.

Comment fonctionnent les moteurs de recherche aujourd’hui : indexation

Regardons les rouages ​​du fonctionnement des moteurs de recherche.

Cet article se concentre sur l’indexation. Alors, plongeons dedans…

Indexage

L’indexation est l’endroit où le processus de classement commence après qu’un site Web a été exploré.

L’indexation fait essentiellement référence à l’ajout du contenu d’une page Web dans Google pour être pris en compte pour les classements.

Lorsque vous créez une nouvelle page sur votre site, il existe plusieurs façons de l’indexer.

La méthode la plus simple pour indexer une page est de ne rien faire.

Google a des robots qui suivent les liens et donc, à condition que votre site soit déjà dans l’index et que le nouveau contenu soit lié à partir de votre site, Google le découvrira éventuellement et l’ajoutera à son index. Plus à ce sujet plus tard.

Comment obtenir une page indexée plus rapidement

Mais que se passe-t-il si vous voulez que Googlebot accède plus rapidement à votre page ?

Cela peut être important si vous avez un contenu opportun ou si vous avez apporté une modification importante à une page dont vous souhaitez que Google soit informé.

J’utilise des méthodes plus rapides lorsque j’ai optimisé une page critique ou que j’ai ajusté le titre et/ou la description pour améliorer les clics. Je veux savoir précisément quand ils ont été récupérés et affichés dans les SERP pour savoir où commence la mesure de l’amélioration.

Dans ces cas, il existe quelques méthodes supplémentaires que vous pouvez utiliser.

1. Plans de site XML

Les sitemaps XML sont le moyen le plus ancien et généralement fiable d’attirer l’attention d’un moteur de recherche sur le contenu.

Un plan de site XML donne aux moteurs de recherche une liste de toutes les pages de votre site, ainsi que des détails supplémentaires à son sujet, comme la date de sa dernière modification.

Un sitemap peut être soumis à Bing via Bing Webmaster Tools et il peut également être soumis à Google via Search Console.

Certainement recommandé!

Mais lorsque vous avez besoin d’une page indexée immédiatement, ce n’est pas particulièrement fiable.

2. Demander l’indexation avec Google Search Console

Dans la Search Console, vous pouvez « Demander l’indexation ».

Vous commencez par cliquer sur le champ de recherche supérieur qui se lit par défaut, « Inspecter et URL dans domain.com ».

Entrez l’URL que vous souhaitez indexer, puis appuyez sur Entrée.

Si la page est déjà connue de Google, il vous sera présenté un tas d’informations à ce sujet. Nous n’aborderons pas cela ici, mais je vous recommande de vous connecter et de voir ce qu’il y a si vous ne l’avez pas déjà fait.

Le bouton important, pour nos besoins ici, apparaît que la page ait été indexée ou non – ce qui signifie qu’elle est bonne pour la découverte de contenu ou simplement pour demander à Google de comprendre un changement récent.

Vous trouverez le bouton comme indiqué ci-dessous.

Indexation des demandes GSC

En quelques secondes à quelques minutes, vous pouvez rechercher le nouveau contenu ou l’URL dans Google et trouver le changement ou le nouveau contenu récupéré.

3. Participez à IndexNow de Bing

Bing a un protocole ouvert basé sur une méthode push pour alerter les moteurs de recherche du contenu nouveau ou mis à jour.

Ce nouveau protocole d’indexation des moteurs de recherche s’appelle IndexNow.

C’est ce qu’on appelle un protocole push car l’idée est d’alerter les moteurs de recherche utilisant IndexNow sur le contenu nouveau ou mis à jour qui les incitera à venir l’indexer.

Un exemple de protocole d’extraction est l’ancienne méthode Sitemap XML qui dépend d’un robot d’exploration de moteur de recherche pour décider de le visiter et de l’indexer (ou d’être récupéré par la Search Console).

L’avantage d’IndexNow est qu’il gaspille moins de ressources d’hébergement Web et de centre de données, ce qui est non seulement respectueux de l’environnement, mais permet également d’économiser des ressources de bande passante.

Le plus grand avantage, cependant, est une indexation plus rapide du contenu.

IndexNow est actuellement utilisé uniquement par Bing et Yandex.

La mise en œuvre d’IndexNow est simple :

  • Il existe un plugin IndexNow WordPress.
  • Module Drupal IndexNow.
  • IndexNow sur Duda est activé par défaut.
  • IndexNow pris en charge par Cloudflare.
  • IndexNow pris en charge par Akamai.

4. Outils pour les webmasters Bing

En plus de participer à IndexNow, envisagez un compte Bing Webmaster Tools.

Si vous n’avez pas de compte Bing Webmaster Tools, je ne peux que le recommander.

Les informations fournies ici sont substantielles et vous aideront à mieux évaluer les problèmes et à améliorer votre classement sur Bing, Google et ailleurs – et probablement à offrir également une meilleure expérience utilisateur.

Mais pour indexer votre contenu, il vous suffit de cliquer sur : Configurez Mon site > Envoyer des URL.

À partir de là, vous entrez la ou les URL que vous souhaitez indexer et cliquez sur « Soumettre ».

bing-webmaster-submit-urls

Donc, c’est presque tout ce que vous devez savoir sur l’indexation et comment les moteurs de recherche le font (en gardant un œil sur la direction que prennent les choses).

Plus de détails sur la page d’aide de l’outil de soumission d’URL de Bing Webmaster Tools.

Il existe également une API d’indexation Bing Webmaster Tools qui peut également accélérer le temps d’affichage du contenu dans les résultats de recherche de Bing en quelques heures. Plus d’informations sur l’API d’indexation Bing ici.

Budget d’exploration

On ne peut pas vraiment parler d’indexation sans parler du budget de crawl.

Fondamentalement, le budget d’exploration est un terme utilisé pour décrire la quantité de ressources que Google dépensera pour explorer un site Web.

Le budget attribué est basé sur une combinaison de facteurs, les deux principaux étant :

  • La vitesse de votre serveur (c’est-à-dire, combien Google peut-il explorer sans dégrader votre expérience utilisateur).
  • Quelle est l’importance de votre site.

Si vous gérez un site d’actualités majeur avec un contenu constamment mis à jour que les utilisateurs des moteurs de recherche voudront connaître, votre site sera fréquemment exploré (oserais-je dire… constamment).

Si vous dirigez un petit salon de coiffure, que vous avez quelques dizaines de liens et que vous n’êtes à juste titre pas considéré comme important dans ce contexte (vous êtes peut-être un coiffeur important dans la région, mais vous n’êtes pas important en ce qui concerne le budget d’exploration), alors le le budget sera faible.

Vous pouvez en savoir plus sur les budgets de crawl et leur détermination dans l’explication de Google ici.

Google a deux types d’exploration

L’indexation par Google commence par l’exploration, qui a deux types.

Le premier type d’exploration est la découverte, où Google découvre de nouvelles pages Web à ajouter à l’index.

Le deuxième type d’exploration est l’actualisation, où Google trouve les modifications dans les pages Web qui sont déjà indexées.

Découvrez comment fonctionnent les moteurs de recherche

L’optimisation des sites Web pour les moteurs de recherche commence par un bon contenu et se termine par son envoi pour qu’il soit indexé.

Que vous le fassiez avec un sitemap XML, l’outil de soumission d’URL de la console de recherche Google, les outils pour les webmasters Bing ou IndexNow, l’indexation de ce contenu est le moment où votre page Web commence son parcours vers le haut des résultats de recherche (si tout fonctionne !) .

C’est pourquoi il est important de comprendre le fonctionnement de l’indexation de recherche.

Comment fonctionnent les moteurs de recherche aborde le fonctionnement des moteurs de recherche et les facteurs clés qui influencent les pages de résultats des moteurs de recherche.

Télécharger les ici.

LAISSER UN COMMENTAIRE

S'il vous plaît entrez votre commentaire!
S'il vous plaît entrez votre nom ici