Maintenant, créez le fichier "robots.txt" dans votre répertoire racine. Copiez le texte ci-dessus et collez-le dans le fichier texte.
About the Robots.txt Generator tool!
Generate effective robots.txt files that help ensure Google and other search engines are crawling and indexing your site properly.