# robots.txt fuer http://urban.gmxhome.de/ User-agent: * # Diese Zeile besagt dass alle Suchmaschinenrobots angesprochen werden. Disallow: /img/ # Images nicht indexieren Disallow: /log/ # Logfiles nicht indexieren Disallow: /basic.css # Die css-Datei darf nicht !! indiziert werden Disallow: /lap.htm # Die Datei lap.htm soll nicht !! indiziert werden Disallow: /wps.htm # Die Datei wps.htm soll nicht !! indiziert werden Disallow: /passwortschutz/ # Das Verzeichnis Passwortschutz soll nicht !! indiziert werden Allow: /pdf/ # Das Verzeichnis PDF darf durchsucht werden Allow: /index.html # Die Datei index.html wird explizit angeführt zum Durchsuchen Allow: /inhalt.htm # Die Datei inhalt.htm wird explizit angeführt zum Durchsuchen # programmiert von Frank Urban 01.08.2002 # geändert 28.02.2005