################################################################################################################################
# bestimmte Seiten oder Bereiche von www.creative-templates.de vor der Indexierung zu schuetzen
################################################################################################################################
# Kurze Syntax- Erlaeuterung:
# SYNTAX: User-agent: * -> * bedeutet alle Robots ausschliessen, ansonten muss der entsrpechende Robot hier eingetragen werden
# SYNTAX: Disallow: /beispiel/ -> schliesst das gesamte Verzeichnis aus
# SYNTAX: Disallow: /beipsiel.html -> schliesst die entsprechende Datei aus
# SYNTAX: Disallow: / -> schliesst die ganze Website (das root- Vereichnis) aus
# SYNTAX: Disallow: /*.gif$ -> schliesst Dateien eines bestimmten Dateityps aus (hier gif)
# SYNTAX: Disallow: /*? -> schliesst dynamisch erstellte Seiten aus
################################################################################################################################

#################################################
# Alle Robots ausschliessen
#################################################

# Ganze Seite für alle Robots sperren
User-agent: *
Disallow: /

# ALternative: zu sperrende Verzeichnisse von www.creative-templates.de explizit angeben: 
User-agent: *
Disallow: /.awstats-data/
Disallow: /fileadmin/
Disallow: /misc/
Disallow: /t3lib/
Disallow: /typo3/ 
Disallow: /typo3conf/
Disallow: /typo3temp/
Disallow: /uploads/
Disallow: /.httpd.conf
Disallow: /.vsphpignore
Disallow: /_.htaccess
Disallow: /index.php

#Zum Entfernen aller Dateien eines bestimmten Dateityps
#User-agent: *
#Disallow: /*.gif$

#Zum Entfernen dynamisch erstellter Seiten 
User-agent: *
Disallow: /*?

#################################################
# Google nochmal explizit ausschliessen
#################################################

User-agent: Googlebot
Disallow: /

# ALternative: zu sperrende Verzeichnisse von www.creative-templates.de explizit angeben: 
User-agent: Google
Disallow: /.awstats-data/
Disallow: /fileadmin/
Disallow: /misc/
Disallow: /t3lib/
Disallow: /typo3/ 
Disallow: /typo3conf/
Disallow: /typo3temp/
Disallow: /uploads/
Disallow: /.httpd.conf
Disallow: /.vsphpignore
Disallow: /_.htaccess
Disallow: /index.php


#Zum Entfernen aller Dateien eines bestimmten Dateityps
#User-agent: Googlebot
#Disallow: /*.gif$

#Zum Entfernen dynamisch erstellter Seiten 
User-agent: Googlebot
Disallow: /*?

#Bilder aus dem Bildsuchdienst von Google entfernen
User-agent: Googlebot-Image
Disallow: /*.gif$ 
Disallow: /*.jpg$ 
Disallow: /*.jpeg$ 
Disallow: /*.png$