Robots.txt du site webrankinfo

[Ohax]

par curiosité j'ai regardé le robots.txt de webrankinfo:
http://www.webrankinfo.com/robots.txt

Code: Tout sélectionner

User-agent:  *
Disallow: /forums/login.php
Disallow: /forums/modcp.php
Disallow: /forums/posting.php
Disallow: /forums/printview.php
Disallow: /forums/privmsg.php
Disallow: /forums/search.php
Disallow: /forums/viewonline.php

User-agent: TurnitinBot
Disallow: /

User-agent: QuepasaCreep
Disallow: / 

et je reste étonné sur le fait qu'il y ait 2 espaces qui séparent "User-agent:" et "*"

même le robots.txt de google ne met pas d'espace:
http://www.google.fr/robots.txt

de même après pour voir un espace après certaines lignes


je croiait que cela était déconseillé

donc je voudrai juste savoir s'il s'agit d'une erreur ou si cela n'a vraiment aucune importance

merci à vous car je patoge un peu là

[Ohax]

mon post n'interresse donc personne?

[WebRankInfo]

je l'ai vérifié ici par exemple et il ne trouve pas d'erreur : http://www.searchengineworld.com/cgi-bin/robotcheck.cgi

[achtungbaby]

Il sert à quoi le fichier robot.txt ?

[tuisp]

http://www.dicodunet.com/definitions/mo ... ts-txt.htm Désolé si ce n'était pas la question...

[achtungbaby]

Merci, c'est la bonne réponse.