Exemple de fichier robot.txt
Posted on December 18th, 2018 by admin
Vous ne devez pas le modifier avec des éditeurs HTML, des processeurs de texte, ni des applications autres qu`un éditeur de textes simples comme VI (OK, bloc-notes. Ces gars aussi inclus une ligne drôle. Le premier bit de chaque bloc de directives est l`utilisateur-agent, qui identifie une araignée spécifique. Les robots. Tapez simplement dans […]
No Comments »
Filed under: Uncategorized