User-agent: * Disallow: /api/ Disallow: /ausleihe/ Disallow: /admin/ Disallow: /classes/ Disallow: /copyrights/ Disallow: /cron/ Disallow: /css/ Disallow: /fl/ Disallow: /img/ Disallow: /inc/ # Neuerdings kann GoogleBot auch JS. Deswegen braucht er Zugriff #Disallow: /js/ #Disallow: /proc/ Disallow: */pdf/ Disallow: */pdf$ Disallow: */print/ Disallow: */mark_* Disallow: /forum/ Disallow: /forum. # Prinzipien sollen nur (!) mit der URL, die den Titel enthält gecrawlt werden # Nun läuft ein 301 und ein java redirect, der das Problem lösen sollte. #Disallow: /9*0/$ #Disallow: /9*0$ Sitemap: http://www.trans-lex.org/sitemap.xml