User-agent: *
Disallow:

# Yahoo Slurp soll nicht so oft zugreifen. Delay 0.5-1 für etwas seltener, Deleay 5-10 für viel seltener
User-agent: Slurp
Crawl-delay: 3