Pourquoi avez-vous besoin d'indexer votre site ?
Tout d'abord, la réponse est évidente. Si vous voulez que votre site apparaisse dans les résultats de recherche, il doit être indexé. Cependant, vous ne voulez pas que votre site soit indexé une seule fois. Vous voulez que les moteurs de recherche continuent à réindexer votre site.
Les moteurs de recherche comme Google ne se contentent pas d'une mise à jour automatique. Ils s'appuient sur des spiders/araignées - des petits bouts de code informatique que chaque moteur de recherche envoie pour "explorer" le web (d'où le terme "araignée"). Vous voulez un taux d'exploration efficace et fréquent. Le travail de l'araignée consiste à rechercher de nouveaux éléments sur le web et à mettre à jour la version déjà indexée de votre site. Ces "nouveautés" peuvent être une nouvelle page d'un site existant, une modification d'une page existante (Ex: Referencement verification Google), ou un site ou un blog entièrement nouveau.
Une fois que l'araignée (spider) a trouvé un nouveau site ou une nouvelle page, elle doit comprendre de quoi il s'agit. Au début du web, les araignées des moteurs de recherche n'étaient pas aussi intelligentes qu'aujourd'hui. Vous pouvez forcer une araignée à indexer et à classer votre page en vous basant uniquement sur le nombre de fois qu'une phrase de recherche particulière ("mot-clé") apparaissait sur la page.
Pour le succès du contenu d'aujourd'hui, vous ne pouvez pas vous fier à ces stratégies d'optimisation des moteurs de recherche de la vieille école. De nos jours, Google se préoccupe beaucoup plus de l'expérience globale de l'utilisateur sur votre site et de l'intention de l'utilisateur derrière la recherche - c'est-à-dire, est-ce que l'utilisateur veut acheter quelque chose (intention commerciale) ou apprendre quelque chose (intention informationnelle).
Pour faire donc simple, l'indexation est le moyen qu'utilise l'araignée pour collecter et traiter toutes les données des pages et des sites pendant son parcours sur le web. Une indexation fréquente améliore vos résultats de recherche. L'araignée note les nouveaux documents et les modifications, qui sont ensuite ajoutés à l'index consultable que Google tient à jour. Ces pages ne sont ajoutées que si elles contiennent un contenu de qualité et ne déclenchent pas d'alarme en faisant des choses louches comme le bourrage de mots-clés ou la création d'un tas de liens provenant de sources peu fiables. La fréquence d'indexation de votre site peut avoir une incidence sur vos performances dans les résultats de recherche. C'est la version courte et quelque peu simplifiée de la façon dont Google trouve, analyse et indexe de nouveaux sites comme le vôtre. De nombreux autres moteurs de recherche, comme Bing ou Yahoo, suivent des procédures similaires, bien qu'il puisse y avoir des variations dans les spécificités car chacun a son propre algorithme.
Il faut noter que Google veut recommander les meilleurs sites web à ses utilisateurs. Il recherche les sites qui offrent une bonne expérience utilisateur. Bien que cela comprenne de nombreux facteurs, la qualité du contenu et la vitesse de chargement du site sont très importantes. Pour faire simple: un site plus rapide = meilleure expérience utilisateur et une meilleure expérience utilisateur = meilleur classement dans les résultats de recherche.