# Deze file wordt gebruikt door automatische WWW robots, web # crawlers en dergelijke. Het geeft aan welke plekken # niet door zulke robots bezocht mogen worden. # Zie http://web.nexor.co.uk/mak/doc/robots/norobots.html # en http://searchenginewatch.com/webmasters/spiderchart.html # voor meer informatie. # # # Mail ons als je meer informatie nodig hebt: # # mailto:builders@nl.linux.org # User-agent: * # voor alle robots Disallow: /lists/ # robots lezen geen mailing lists... Disallow: /doc/user/ # laat ze de stats niet verpesten... Disallow: /images/ Disallow: /forum/ # alleen gebruiker discussies Disallow: /boekrec/ Disallow: /boeken/zoeken/stem.php3 Disallow: /cvsweb/ # geen nuttige informatie User-agent: wget # voor wget Disallow: /boeken/