# robots.txt generiert von www.webmasterelite.de # URL: http://olehnielsen.dk/ # Alle Roboter spidern die Domain User-agent: * Disallow: # Verzeichnis /test soll nicht von * gespidert werden User-agent: * Disallow: /test # Verzeichnis http://hejresiden.olehnielsen.dk/en/ soll nicht von * gespidert werden User-agent: * Disallow: http://hejresiden.olehnielsen.dk/en/