robots.txt
Générer fichier robots
Règle 1
User-agent: * Allow: /
Questions fréquentes
Qu'est-ce que robots.txt ?
Robots.txt est un fichier qui indique aux robots des moteurs de recherche quelles pages ou sections de votre site ne doivent pas être explorées. Il est placé dans le répertoire racine de votre site.
Robots.txt empêche-t-il les pages d'apparaître dans les résultats de recherche ?
Non, robots.txt empêche seulement l'exploration, pas l'indexation. Les pages peuvent toujours apparaître dans les résultats si elles sont liées depuis d'autres sites. Utilisez la balise noindex pour empêcher l'indexation.
Quelle est la différence entre Disallow et Noindex ?
Disallow dans robots.txt empêche l'exploration mais les pages peuvent toujours être indexées. La balise noindex empêche l'indexation mais permet l'exploration. Utilisez les deux pour un blocage complet.