User-agent: * # Bestimmte Seite (URL) nicht indexieren ( bei Url's ist auf groß-kleinschreibweise zu achten ) Disallow: /fileadmin/admin_upload/swf_gallery/gallery.xml #05.05.2010 Disallow: /fileadmin/admin_upload/swf_galleryBeispieleWebstarter/gallery.xml #05.05.2010 # Bestimmten Ordner nicht indexieren Disallow: /uploads/pics/ # aber diese eine Datei doch für robots zulassen # Allow: /fileadmin/admin_upload/swf_gallery/gallery.xml # Bestimmte Datei o. Ordner nicht indexieren welche beginnen mit: index (ohne slash (/) am Ende) #Disallow: /index # Seiten mit einer bestimmten Dateiendung nicht indexieren ( hier alle Seiten mit der Endung php ) #Disallow: /*.php$ # Dynamische Seiten nicht indexieren (z.B. http://www.domain.de/redirect.php?seite=main ) #Disallow: /redirect.php?*$ #03.05.2010 / am 05.05.2010 wieder deaktiviert #Wenn alle Bilder Ihrer Website aus unserem Index entfernt werden sollen #http://www.google.com/support/webmasters/bin/answer.py?hl=de&answer=35308 #User-agent: Googlebot-Image #Disallow: /