User-agent: * Disallow: /_awstats/ Disallow: /_cgi_bin/ Disallow: /_cp/ Disallow: /_gif/ Disallow: /_images/ Disallow: /_modlogan/ Disallow: /_test/ Disallow: /_webalizer/ Disallow: /index.old/ Disallow: /index.swfold/ Disallow: /index_alt_mb.html/ Disallow: /index_neu.html/ Disallow: /default.htm/ Disallow: /login.html/ #15.06.2009 für MR&P erstellt #Alle Suchmaschinen erlaubt #Indexierung der Verzeichnisse allen Spidern untersagt wie oben beschrieben #Korrekte Pfadangaben beachten #Ziel: Ich will nur aktuelle Seiten indexiert haben #Unwichtige Seiten müssen nicht indexiert werden #EmailCollector allen spidern untersagt