Keskustelu järjestelmäviestistä:Robots.txt

Page contents not supported in other languages.
Wikikirjastosta
 Tällä järjestelmäviestillä estetään verkkoa selaavia hakurobotteja selaamasta tiettyjä sivuja. Lisätietoa sivustolla http://www.robotstxt.org.
Noudettu kohteesta ”https://fi.wikibooks.org/w/index.php?title=Keskustelu_järjestelmäviestistä:Robots.txt&oldid=54856”