# robots.txt - Datei für METASUCHMASCHINEN! Diese Datei schützt Ihre Verzeichnisse vor Spider und Robots damit sie Verzeichnisse nicht mit in die Suchabfragen mit aufnehmen! 

User-agent: *
Disallow: /cgi-bin/
Disallow: /logs/
Disallow: /ihr-verzeichniss-der-wahl

# Sie können weiter mit dem Eintarg "#Dissalow: /..." hinzufügen!

# Hier könnten noch folgende Einschränkungen gemacht werden!
# User-agent: Scooter
# Disallow: /