# Beispiele: http://www.bjoernsworld.de/suchmaschinen/robots-txt.html # Alle Robots ausschließen User-agent: * Disallow: /cc/ # Demo Disallow: /cc2/ # Demo Disallow: /cc3/ # Demo Disallow: /cc4/ # Demo Disallow: /bbs/ # Forum Disallow: /cc-shop/ # Neues Shop-System Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren (Massendownloader) Disallow: /en/news.xml # Die Dateien sind sehr kurzlebig Disallow: /de/news.xml # Die Dateien sind sehr kurzlebig Disallow: /api/ Disallow: /trial/ Disallow: /public/ Disallow: /ipayment/ # Zahlungsformular Disallow: /customer/ Disallow: /broadcast/ Disallow: /scc_admin/ Disallow: /inc/ Disallow: /images/ # images Disallow: /shop/ Disallow: /classes/