#robots.txt #Webcrawler verbieten #User-agent: #Disallow: / #Verzeichnisse/Dateien verbieten User-agent: * Disallow: /files/ Disallow: /wer-sind-wir/ Disallow: /wo-sind-wir/ Disallow: /impressum/