Kit robots.txt

Ce kit est une base de fichier robots.txt prêt à l'emploi, sous réserve d'un peu de personnalisation.

Ce fichier a été construit à partir des références suivantes :