Les assistants ont-ils le droit de lire votre site ?
Avant d'entrer sur un site, un robot lit un fichier public qui dit ce qu'il a le droit de faire. Nous lisons le vôtre, et nous vous disons ce qu'il autorise — robot par robot.
Avant d'entrer sur un site, un robot lit un fichier public qui dit ce qu'il a le droit de faire. Nous lisons le vôtre, et nous vous disons ce qu'il autorise — robot par robot.