Keskustelu järjestelmäviestistä:Robots.txt

Sivun sisältöä ei tueta muilla kielillä.
Lisää aihe
Wikikirjastosta
 Tällä järjestelmäviestillä estetään verkkoa selaavia hakurobotteja selaamasta tiettyjä sivuja. Lisätietoa sivustolla http://www.robotstxt.org.
Noudettu kohteesta ”https://fi.wikibooks.org/w/index.php?title=Keskustelu_järjestelmäviestistä:Robots.txt&oldid=54856”