Bonjour

Bonjour
Comment interdire à updowner.com de visiter notre site car nous n'avons pas accès au fichier robot.txt ?

Cordialement

Auteur	:	Ycaz
Lectures	:	1013
Création	:	2012-05-06

Antoine a dit ...

Le fichier robots.txt c'est seulement une suggestion que l'on fait aux moteurs de recherche. Si un moteur de recherche ou un autre robot veut lire ton site, il n'y a rien qui l'empêche et encore moins le petit fichier texte robots.txt.

2012-05-06

Ycaz a dit ...

Bonjour Antoine

... j'y crois pas trop pour avoir d'autres sites en production avec des robot.txt "bridés"... Ma question reste entière.

Bonne soirée

2012-05-06

Antoine a dit ...

Ta question restera entière jusqu'au moment où tu comprendras ce que c'est un fichier robots.txt. Cherche dans google, apprends ce que c'est et tu sauras de quoi tu parles.

2012-05-06

Yves a dit ...

Bonjour,

On peut lire :

"Il est important de comprendre qu’il ne s’agit là que d’une indication sur ce que doivent faire les robots bienveillants, ce n’est en aucun cas un élément de sécurité. En effet, certains robots ignorent ce fichier, soit délibérément parce qu’ils cherchent des informations privées (des adresses électroniques par exemple, pour y envoyer du courrier indésirable), soit parce que le robot est trop simple pour gérer ce standard."

http://fr.wikipedia.org/wiki/Protocole_d'exclusion_des_robots

En plus, je ne crois pas que updowner soit un moteur de recherche. C'est peut être simplement un robot que prends des données pour d'autres besoins. En tout cas, moteur de recherche ou pas, on ne peut pas techniquement empêcher quelqu'un d'aller dans un site avec le fichier robots.txt.

Yves

2012-05-06