Bonjour,

j'ai une question concernant les bots de Google et autres moteurs

Est-il possible de les empêcher de rentrer sur un site et donc d'en référencer le contenu?

C'est juste une question que je me pose parfois,

Merci

Oui, tu créer un fichier robot.txt à la racine de ton site sur lequel tu écris:

User-agent: *
Disallow: /

En gros tu interdis tout les robots de parcourir tes pages et donc a être référencé.

PS: C'est purement théorique, car les robots ne se gênent pas pour te crawler quand même. Mais au moins tu n'es pas référencé "officiellement" ;).

merci,

une autre question en rapport:
parfois je fais une recherche dont les résultats (en cache) pointent sur une page de forum en principe protégée par un mot de passe (où faut être membre quoi)

comment les robots arrivent-ils à franchir la page d'identification?

si c'est un forum phpbb3 il faut aller dans les permissions du forum concerné et empêcher l'accès aux robots, si c'est un autre je ne sais pas désolé

+1 pour phpbb.

Et "Google Webmaster Tools" permet de gérer des sessions spécialement conçus pour que Google puisse accéder à certaines pages d'un site protégés.

Ok, merci

tant que vous êtes là

je suis chaque jour étonné par la rapidité pour afficher le résultat d'une recherche...c'est fascinant

comment fait-il pour afficher des milliers de résultats en 1 seconde?
c'est plus rapide que pour trouver un seul fichier sur un disque dur local

Des machines de brute, des algos de bourrins.