Fichier robots.txt : contrôler l'exploration de votre site
Le fichier robots.txt indique aux robots ce qu'ils peuvent explorer. Syntaxe, usages utiles, erreurs graves à éviter et différence avec la balise noindex.
Mot-clef
#Robots.txt
Tous les articles taggés Robots.txt — conseils et ressources par Benjamin Schweitzer.
3 articles
SEO technique : maîtriser le crawl et l'indexation Google
Maîtrisez le SEO technique avec le crawl et l'indexation Google. Robots.txt, sitemap, budget de crawl, logs serveur et optimisation pour Googlebot.
Audit SEO technique : la checklist complète en 15 points
Réalisez un audit SEO complet de votre site grâce à cette checklist en 15 points : robots.txt, sitemap, vitesse, canonicals et plus encore.