User-agent: *
Host: 1september.ru
Disallow: /Export/
Disallow: /ru/
Crawl-delay: 2 # задает таймаут в 2 секунды

# Sitemap: http://mysite.ru/site_structure/my_sitemaps1.xml
# Clean-param: ref /some_dir/get_book.pl