# Gilt fuer alle Crawlwer
User-agent: *
# Disallow: /
# Ab hier bestimmte Dateien ausschliessen
Disallow: /tankstelle.html
Disallow: /start.html
# Ab hier ganze Verzeichnisse ausschliessen
Disallow: /frames/
Disallow: /html/
Disallow: /java/
Disallow: /pix/

User-agent: InsurancoBot
Disallow: /

User-agent: EsperanzaBot
Disallow: /

User-agent: GuggugBot
Disallow: /

User-agent: thesubot
Disallow: /