# robots.txt fuer http://www.denta-tec.com.de/
User-agent: wget
User-agent: webzip
User-agent: webmirror
User-agent: webcopy
Disallow: /temp/              # Die Dateien sind sehr kurzlebig    
Disallow: /logfiles/          # Die ändern sich jeden Tag 
Disallow: /images/            # Bilder nicht downloaden
Disallow: /cgi-bin/           # CGI Ausgaben nicht indexieren 
Disallow: /callback.html  
Allow: /index.html
Allow: /seminare.html
Allow: /messe.html
Allow: /newsletter.html
Allow: /partnerlinks.html
Allow: /jobs.html