# robots.txt for http://www.mole-analyzer.com # one 'robots.txt' file only into root folder User-agent: * Disallow: /_private/ Disallow: /cgi-local/ Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren Disallow: /logfiles/ # Die ändern sich jeden Tag Disallow: /temp/ # Die Dateien sind sehr kurzlebig