# robots.txt fuer research-fellows.de User-agent: * Disallow: /with_fl # # Duplikate (Sprachversion) ausblenden Disallow: /*L=0 # # weitergeleitete Dateien ausblenden Disallow: /without_fl/Html/4.html Disallow: /without_fl/Html/6.html Disallow: /without_fl/Html/8.html Disallow: /without_fl/Html/19.html # #URLs mit id vom Crawlen ausschließen Disallow: *?id=*