Budget de crawl : aider Google à explorer les bonnes pages
Le budget de crawl détermine combien de pages Google explore sur votre site. Quand s'en soucier, comment l'analyser et l'optimiser pour indexer l'essentiel.
Mot-clef
#Crawl
Tous les articles taggés Crawl — conseils et ressources par Benjamin Schweitzer.
2 articles
Fichier robots.txt : contrôler l'exploration de votre site
Le fichier robots.txt indique aux robots ce qu'ils peuvent explorer. Syntaxe, usages utiles, erreurs graves à éviter et différence avec la balise noindex.