# Mehrere Verzeichnisse ausschließen # Roboter Info vom 06.09.2005 User-agent: * Disallow: /home/ Disallow: /typo3/ Disallow: /typo3_src/ Disallow: /typo3_src-4.2.8/ Disallow: /typo3conf/ Disallow: /typo3temp/ Disallow: /uploads/ ####################################################### ### LEGENDE ########################################### ####################################################### ## Alle Roboter ausschließen #User-agent: * #Disallow: / ## Alle Roboter einladen ## Eine leere Datei erfüllt den gleichen Zweck #User-agent: * #Disallow: ## Alle Roboter von einer Datei fernhalten ##User-agent: * #Disallow: /verbotenr.html ## Alle Roboter von bestimmten Verzeichnissen fernhalten #User-agent: * #Disallow: /unwichtig/ #Disallow: /cgi-local/ ## Einen bestimmten Robot ausschließen #User-agent: Sidewinder #Disallow: / ## Einen bestimmten Robot einladen #User-agent: WebCrawler #Disallow: