# robots.txt (Infodatei für Roboter & Suchmaschinen) der Webseite http://www.pisica.de # Useragent simulieren: http://www.botsvsbrowsers.com/SimulateUserAgent.asp # Alle Robots dürfen diese Domain durchsuchen User-agent: * # Diese Verzeichnisse dürfen Robots nicht durchsuchen/indizieren Disallow: /!test/ Disallow: /flash/ Disallow: /bilder/ Disallow: /chat/ Disallow: /downloads/amateurfunk/pics/ Disallow: /downloads/dos/pics/ Disallow: /downloads/elektronik/pics/ Disallow: /downloads/kalender/pics/ Disallow: /downloads/mathematik/pics/ Disallow: /downloads/physik/pics/ Disallow: /downloads/spass/pics/ Disallow: /downloads/spiele/pics/ Disallow: /games/inc/ Disallow: /games/games/ Disallow: /inc/ Disallow: /modul/inc/ Disallow: /phpmail/ Disallow: /stat/ Disallow: /upload/ Disallow: /webmail/ # Diese Dateien dürfen Robots nicht durchsuchen/indizieren # Interne Links die auf diese Dateien weisen, müßen zusätzlich das # Attribut rel="nofollow" beinhalten, sonst nützt diese Einträge hier wenig Disallow: /modul/gaestebuch.php Disallow: /modul/kontakt.php Disallow: /modul/impressum.php # EMail Sammler draussenbleiben User-agent: EmailCollector Disallow: / # Nervige Roboter bremsen User-agent: Slurp Crawl-delay: 999 # Sitemapverzeichnis XML-Dateiformat (fuer Google, Yahoo und MSN) Sitemap: http://www.pisica.de/sitemap.xml