User-agent: * Sitemap: http://www.g2s.fr/sitemap.xml Disallow: /awstats/ # Spécifique pour robot Yahoo (info sur www.inktomisearch.com): # If the crawler rate is a problem for your server, you can set the delay up to 5 or 10 User-agent: Slurp Crawl-delay: 8