Topic: Où placer mon fichier robots.txt sur ma SME

[manuman]

Bonjour à tous, je souhaiterais savoir dans quel répertoire je dois placer mon fichier robots.txt afin d'interdire aux robots des moteurs de recherche de lire certains fichiers de mon site lors de leur exploration.
Merci d'avance pour vos réponses.

[tanyu]

dans le répertoire /html de l'ibay du site..

[manuman]

Merci pour la réponse Tanyu. Le problème est : comment faire pour interdire l'accès à, par exemple, /cgi-bin/ ou /ftp/ par le biais de robot.txt ( en rajoutant

Code: [Select]

Disallow: /cgi-bin/  par exemple)? Ne faudrait-il pas situer robot.txt à la racine de l'ibay ?

Si mal placé le fichier n'empêchera pas les robots de parcourir la totalité de l'ibay.
Merci pour vos réponses.

[tanyu]

Le fichier robots.txt est  recherché par le moteur de recherches à l'emplacement où se trouve le fichier html ou php appellé.. donc forcément dans /html..
Après, effectivement, il empêchera l'indexation de /files ou /cgi-bin, mais le robot ira forcément le rechercher dans le dossier racine du SITE WEB qui est /html.. et où le lien http://www.votresite.com le conduira forcément..
Tous mes sites sur SME marchent comme çà et çà fonctionne très bien..

[tanyu]

Pour ce qui est de /ftp, vu que ce n'est pa un répertoire standard de l'ibay, il me semble qu'il est plus simpe d'utiliser /giles et de l'interdire dans robots.txt..
A la votre..  

[manuman]

Merci Tanyu pour les réponses, le voile est enfin levé pour moi sur ce fichier robots.

  Et bonne santé !