# alle robots von bestimmten Pfaden ausschließen - # ACHTUNG nie "geheime" Pfade verwenden! # User-agent: * # Disallow: /testpfad1/ # Disallow: /testpfad2/ # einzelle Robots ausschließen www.test.com # User-agent: Test # Disallow: / # Robot Cybermapper keine Einschränkungen # User-agent: cybermapper # Disallow: # Massendownloader fernhalten # User-agent: wget # User-agent: webzip # User-agent: webmirror # User-agent: webcopy # Disallow: / # Alle zulassen User-Agent: * Disallow: /img/ Disallow: /imgext/ Disallow: /impressum.php Disallow: /contact.php Disallow: /agb.php Disallow: /vergleich.php?id=0121 Disallow: /vergleich.php?id=1021 Disallow: /vergleich.php?id=2022 Disallow: /vergleich.php?id=0124 Allow: /