Le fichier robots.txt est utilisé sur les sites internet pour donner des informations aux robots qui analyses les pages d'un site. Très recommandé.

Description par funnycat