# robots.txt fuer http://www.promomasters.at/ # Anleitungen und Regeln finden Sie am Ende des Dokuments User-agent: * Disallow: /*trackback* Disallow: /*?C=* Disallow: /sitemap/ Disallow: /blog/wp-admin/ Disallow: /cgi-bin/ Disallow: /private/ Disallow: /keyvote/ Disallow: /4ko4hl4at/ Disallow: /4so4uz4at/ # Hier steht der Linkverweis fuer die XML Sitemaps Sitemap: http://www.promomasters.at/sitemap.xml Sitemap: http://www.promomasters.at/blog/feed/ Sitemap: http://www.kohlfuerst.at/podcast.xml Sitemap: http://www.promomasters.at/blog/sitemap.xml Sitemap: http://www.promomasters.at/blog/sitemap-news.xml # DIE REGELN by http://www.kohlfuerst.at/ # Disallow:/ # Gesamte Präsenz soll nicht gecrawlt werden # Disallow: /*? # Seiten, die ein Fragezeichen in der URL enthalten, sollen nicht gecrawlt werden # Disallow: /verzeichnis/ # Allow: /verzeichnis/datei.htm # Crawle verzeichnis nicht ausser datei.htm # Disallow: /*.doc$ # Alle Dateien mit der Endung .doc sollen NICHT gecrawlt werden # Disallow: /*? # Allow: /*?$ # Alle Dateien nicht crawlen, die ein Fragezeichen enthalten. # Dateien, welche direkt mit einem Fragezeichen enden, sollen hingegen indexiert werden # Disallow: /nein*/ # Alle verzeichnisse die mit nein beginnen ( /neinsagen/, /nein-meinen/ etc.) vom Crawling ausschliessen