User-Agent: *
Disallow: /cgi-bin/ 
missing.htm
/test/ 
/webalizer/
/wwwstat/
/banner/
/classified/
/ffa/
/flash/
/flk/
/images/

User-Agent: sitecheck.internetseer.com
Disallow: /