User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /pragleipzig/
Disallow: /lgexa/

# Hier steht der Linkverweis fuer die XML Sitemap
Sitemap: http://www.usc-leipzig.de/index.php?option=com_xmap&sitemap=1&view=xml&no_html=1

# DIE REGELN 

# Disallow:/
# Gesamte Präsenz soll nicht gecrawlt werden

# Disallow: /*?
# Seiten, die ein Fragezeichen in der URL enthalten, sollen nicht gecrawlt werden

# Disallow: /verzeichnis/
# Allow: /verzeichnis/datei.htm
# Crawle verzeichnis nicht ausser datei.htm

# Disallow: /*.doc$
# Alle Dateien mit der Endung .doc sollen NICHT gecrawlt werden

# Disallow: /*?
# Allow: /*?$
# Alle Dateien nicht crawlen, die ein Fragezeichen enthalten. 
# Dateien, welche direkt mit einem Fragezeichen enden, sollen hingegen indexiert werden

# Disallow: /nein*/
# Alle verzeichnisse die mit nein beginnen ( /neinsagen/, /nein-meinen/ etc.) vom Crawling ausschliessen