# robots.txt fuer arpad-dobriban.de User-agent: * Disallow: /cgi-bin # das Verzeichnis cgi-bin wird nicht indiziert Disallow: /bilder #das Verzeichnis bilder wird nicht indiziert Disallow: /schrift #das Verzeichnis schrift wird nicht indiziert # Ladeprogs raus User-agent: Teleport* Disallow: / User-agent: Webwhacker Disallow: / User-agent: WebDevil Disallow: / User-agent: Webzip Disallow: / User-agent: Net Attache Disallow: / User-agent: SiteSnagger Disallow: / # Mail-Terroristen keine Chance User-agent: WX_mail/2.000 Disallow: / User-agent: EmailCollector Disallow: / User-agent: WhoWhere Disallow: / User-Agent: Roverbot Disallow: / User-Agent: ActiveAgent Disallow: / User-agent: EmailSiphon Disallow: /